Googleは第8世代TPU 8tラック規模のネットワークアーキテクチャの詳細を発表しました

robot
概要作成中
AIMPACT メッセージ、5 月 16 日(UTC+8)、Google は第八世代 TPU(TPU 8t)のラックレベル接続と Virgo ネットワークのアーキテクチャの詳細を公開しました。
このネットワークは高基数スイッチとフラットな二層ノンブロッキングトポロジーを採用し、データセンターネットワークの帯域幅を前世代の4倍に引き上げ、単一構造で13.4万以上の TPU 8t チップを接続可能とし、47 Pb/s のノンブロッキング双方向帯域幅と1.7K ExaFlops を超えるほぼ線形スケーリング性能を提供します。
TPU 8t 自体は3D環状トポロジーを採用し、単一のスーパーキャビティは9600チップに拡張可能で、JAX と Pathways を通じて100万以上のチップに拡張可能です。
主要技術には SparseCore アクセラレータ、VPU/MXU のオーバーラップとバランススケーリング、ネイティブ FP4 サポート、Arm ベースの Axion CPU 統合によるホストボトルネックの排除が含まれます。
この設計は、AIモデルが密集した大規模言語モデルから大規模ハイブリッドエキスパートモデルや推論集約型アーキテクチャへと進化することを見据えています。(出典:InFoQ)
GOOGLX1.36%
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • 10
  • 2
  • 共有
コメント
コメントを追加
コメントを追加
Semi-MeltedIceCream
· 2時間前
高基数スイッチのコストは決して低くないでしょう。
この価格設定では、クラウド事業者はどれくらいの期間で回収できるのか計算しなければならないですね。
原文表示返信0
HypeVaccinated
· 6時間前
超算中心刚建完就被谷歌云击败,这迭代速度谁跟得上
原文表示返信0
LeverageWhisperer
· 7時間前
SparseCoreとFP4のネイティブサポートには少し良い点があり、推論コストも抑えられる必要がある。
原文表示返信0
GateUser-6da8ed4c
· 7時間前
Arm Axion CPUを統合して、外部のホストを接続する必要がなくなった。設計はかなり賢い。
原文表示返信0
Stop-LossLineForTheEveningGlow
· 7時間前
JAX/Pathwaysは直接百万規模に拡張され、Googleは他のフレームワークに追いつかせようとしている
原文表示返信0
GateUser-7919e6b9
· 7時間前
13.4万チップ単体構造、この故障ドメインはどう切る?運用はどうやるのか気になる
原文表示返信0
PaperSculptureOctopus
· 7時間前
ちょっと待って、8tは第八世代?私のTPU v5はまだ触ったばかりだよ
原文表示返信0
GateUser-9d67589f
· 7時間前
3Dトーラストポロジー+二層ノンブロッキング、ネットワークの部分は確かにかなり努力を注いだ
原文表示返信0
SpiralSeaSalt
· 7時間前
100万チップクラスター…これは天網を訓練しようとしているのか
原文表示返信0
Post-RainCandlestick
· 7時間前
Googleは今回TPUを思い切り進化させた。47 Pb/sというのはどんな概念だろうか。私の家のブロードバンドは泣きながらトイレに倒れそうだ。
原文表示返信0
もっと見る