恭喜研究团队推进 DeepSeek V3/R1 推理。



在NVIDIA GB200 NVL72上,他们实现了每个GPU 26k输入tokens/s和13k输出tokens/s的性能——相比H100,速度提升近4×/5×。

他们通过 NVFP4 MoE、FP8 注意力和缩减专家并行性实现了这一目标。
查看原文
此页面可能包含第三方内容,仅供参考(非陈述/保证),不应被视为 Gate 认可其观点表述,也不得被视为财务或专业建议。详见声明
  • 赞赏
  • 7
  • 转发
  • 分享
评论
0/400
MEV受害者互助会vip
· 6小时前
4倍提升太猛了吧
回复0
shadowy_supercodervip
· 6小时前
这也太卷了吧
回复0
DeFi老顽童vip
· 6小时前
老头子见惯大风大浪 GPU也能一秒起飞咯
回复0
DAO Therapyvip
· 6小时前
又是科技革新的一哆嗦
回复0
MerkleDreamervip
· 6小时前
内味儿不错啊 速度上天了
回复0
纸手恐慌侠vip
· 6小时前
又不够跑 3090
回复0
0xLuckboxvip
· 7小时前
牛啊 AI跑这么快
回复0
交易,随时随地
qrCode
扫码下载 Gate App
社群列表
简体中文
  • 简体中文
  • English
  • Tiếng Việt
  • 繁體中文
  • Español
  • Русский
  • Français (Afrique)
  • Português (Portugal)
  • Bahasa Indonesia
  • 日本語
  • بالعربية
  • Українська
  • Português (Brasil)