OpenAI前CTO新公司开源首个模型Inkling,架构借鉴DeepSeek-V3

robot
摘要生成中
据动察 Beating 监测,OpenAI 前 CTO Mira Murati 创办的 Thinking Machines Lab,发布首个通用模型 Inkling。模型总参数 9750 亿,每次激活 410 亿,支持文本、图像和音频,最长上下文为 100 万 token。

Inkling 从零训练,但 MoE 架构主要参考 DeepSeek-V3。后训练初期还使用了 Kimi K2.5 等开放模型生成的数据。完整权重已上架 Hugging Face,采用 Apache 2.0 许可。

Thinking Machines 明确承认,Inkling 目前不是最强模型。它主打定制和效率。在 Terminal Bench 2.1 达到相同成绩时,所用 token 约为英伟达 Nemotron 3 Ultra 的三分之一。
NVDA0.33%
此页面可能包含第三方内容,仅供参考(非陈述/保证),不应被视为 Gate 认可其观点表述,也不得被视为财务或专业建议。详见声明
  • 赞赏
  • 评论
  • 转发
  • 分享
评论
请输入评论内容
请输入评论内容
暂无评论