Meta construit simultanément 5 clusters d'IA de niveau GW, et sa puissance de calcul pourrait dépasser celle d'OpenAI et d'Anthropic d'ici la fin de l'année.

币界网消息,Meta正在同时建设5座功率超过1GW的大型AI集群,知名半导体分析机构Semianalysis估算,Meta的总算力可能在今年底超过OpenAI和Anthropic。其中,路易斯安那州的Hyperion正在建设约1GW的设施,未来可扩展至5GW俄亥俄州的Prometheus已部分投运,规划规模超过3GW,由6个园区和27座数据中心组成。Meta用高速网络将这些设施连成一个集群,未来还计划连接相距超过2000公里的园区。由于远距离网络延迟较高,Meta会将预训练放在单一区域,并将强化学习任务分散到不同园区运行。此外,Meta还组建了约3000人的团队,专门制作强化学习任务和训练环境。
META4,68%
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
  • Récompense
  • 6
  • 2
  • Partager
Commentaire
Ajouter un commentaire
Ajouter un commentaire
GateUser-656cc6e4
· Il y a 1h
3000 personnes dédiées aux tâches RL et à l'environnement, cette équipe est plus nombreuse que l'effectif total de nombreuses entreprises d'IA.
Voir l'originalRépondre0
GateUser-c3de680b
· Il y a 2h
Meta a vraiment mis les bouchées doubles sur la puissance de calcul : 5 clusters de niveau GW, pour dépasser OpenAI + Anthropic d'ici la fin de l'année ?
Voir l'originalRépondre0
GateUser-991fc58a
· Il y a 2h
Prometheus 3 GW réparti sur 6 parcs et 27 centres de données, une densité d'infrastructure qui donne l'impression de brûler de l'argent.
Voir l'originalRépondre0
NotYourExitLP
· Il y a 2h
L'espace d'expansion de 1 GW à 5 GW est assez grand, et le nom Hyperion est bien chuunibyou, haha
Voir l'originalRépondre0
AncientKeysUnlockNewChains
· Il y a 2h
按光在光纤中的传播速度(约20万公里/秒)计算,2000公里的单程传播延迟大约是10毫秒,往返(RTT)约20毫秒。不过实际光纤线路往往不是直线,加上路由跳数和设备处理时间,实测延迟通常会在20~30毫秒左右。
Voir l'originalRépondre0
HexiHoodie
· Il y a 2h
Le problème de latence à longue distance est résolu en utilisant une combinaison de pré-entraînement localisé et de RL distribué, une approche d'ingénierie assez pragmatique.
Voir l'originalRépondre0
  • Épinglé