Googleは第8世代TPU 8tラック規模のネットワークアーキテクチャの詳細を発表しました

robot
概要作成中
AIMPACT メッセージ、5 月 16 日(UTC+8)、Google は第八世代 TPU(TPU 8t)のラックレベル接続と Virgo ネットワークのアーキテクチャの詳細を公開しました。
このネットワークは高基数スイッチとフラットな二層ノンブロッキングトポロジーを採用し、データセンターネットワークの帯域幅を前世代の4倍に引き上げ、単一構造で13.4万以上の TPU 8t チップを接続可能とし、47 Pb/s のノンブロッキング双方向帯域幅と1.7K ExaFlops を超えるほぼ線形スケーリング性能を提供します。
TPU 8t 自体は3D環状トポロジーを採用し、単一のスーパーキャビティは9600チップに拡張可能で、JAX と Pathways を通じて100万以上のチップに拡張可能です。
主要技術には SparseCore アクセラレータ、VPU/MXU のオーバーラップとバランススケーリング、ネイティブ FP4 サポート、Arm ベースの Axion CPU 統合によるホストボトルネックの排除が含まれます。
この設計は、AIモデルが密集した大規模言語モデルから大規模ハイブリッドエキスパートモデルや推論集約型アーキテクチャへと進化することを見据えています。(出典:InFoQ)
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • 10
  • 2
  • 共有
コメント
コメントを追加
コメントを追加
LiquidityTeaMaster
· 52分前
Virgo ネット、この名前は良くて、乙女座の強迫性障害のようなノンブロッキング
原文表示返信0
ZkSketcher
· 2時間前
ほぼ線形に拡張して1.7K ExaFlopsに達し、アダールの法則はGoogleでは無効になったのか?
原文表示返信0
MevBreakRoom
· 2時間前
TPU 8t この帯域密度はちょっと異常だ、47 Pb/s ってどんな概念だ
原文表示返信0
NonceNinja
· 2時間前
JAX から百万人規模のチップに拡張し、Pathways はついにその真価を発揮するのか?
原文表示返信0
MarginMoth
· 2時間前
高基数スイッチは高価に聞こえるが、三層Closより光モジュールを節約できるだろう
原文表示返信0
0xPeachy
· 2時間前
見終わったらただ一つ質問したい:いつになったらTPU v6の試用枠を手に入れられるのか
原文表示返信0
SushiLatency
· 2時間前
Arm Axion CPU を統合し、異種計算の遊びがますます華やかになってきた
原文表示返信0
Semi-MeltedIceCream
· 2時間前
VPU/MXU 重複均衡、細粒度スケジューリングまでこれを実現するのは確かにすごい
原文表示返信0
QuietExitPlan
· 2時間前
13.4万チップの一つの構造、この故障ドメインの切り分けは一つの学問だ
原文表示返信0
GlassDomeUniverse
· 2時間前
集中的 LLM から MoE + 推論アーキテクチャへ、この波は業界の予測を先取りしたものだ
原文表示返信0
もっと見る