出走半年后回归字节,分布式专家林海滨重返字节Seed团队

robot
概要作成中
ME AI メッセージによると、動察 Beating 監視によると、元ByteDanceの大規模モデル訓練責任者の林海滨が正式にSeedチームに復帰し、分散型訓練基盤の開発を引き続き統括している。林海滨は去年12月に退職し、OpenAIの創設者イリヤ・サツケバー(Ilya Sutskever)率いるスーパーインテリジェンス企業SSI(Safe Superintelligence)に入社したが、出走から復帰までの期間は半年未満だった。カーネギーメロン大学(CMU)修士であり、著名なデータベース専門家のアンドリュー・パヴロ(Andy Pavlo)教授のもとでAIを専攻した林海滨は、強化学習訓練フレームワーク veRLと万単位の分散訓練システム MegaScaleを主導してオープンソース化した。林海滨の迅速な復帰は、中米の大規模モデルのトップ人材の流れの変化を反映している。 2020年にByteDanceのAML(応用機械学習)チームに加入する前、林海滨はAmazon AWSでMXNetフレームワークの開発に携わった。ByteDance在籍中、林海滨はGPU推薦訓練システムと集合通信ライブラリByteCCLの開発を主導し、1万枚以上のGPUを用いた並列協調の難題を克服してMegaScale訓練システムを完成させた。現在、豆包大規模モデルの日次呼び出し量は高水準にあり、多模態とエージェントの研究開発には訓練クラスターの安定性が極めて重要である。林海滨は以前からByteDanceの技術体系に精通しており、基盤となる分散訓練システムの改良を直接支援できる。さらに、林海滨が主導して開発したオープンソースの強化学習訓練フレームワーク veRLは、Alibabaの通义千問や上海AI研究所に採用されている。 ByteDanceの人員流入規定によると、退職後3ヶ月以内で違反記録のない社員は再入社を申請でき、退職から1年未満の場合は職位と給与が維持される。林海滨のByteDance復帰は、最近の大規模モデルのコアチームに対するインセンティブ施策に呼応している。ByteDanceはSeed部門の社員に対し、1株あたり13ドルの特別ストックオプションを提供している。現在、大規模モデル人材獲得競争は「オプション+自主権+計算能力」の総合的な争奪戦に進化しており、以前はSeedラボの約70名が外部の大規模モデル企業に流出したこともある。ByteDanceは、特別株式設計を通じて人材流出を逆転させようとしている。 (出典:BlockBeats)
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • 6
  • 2
  • 共有
コメント
コメントを追加
コメントを追加
TidalShellReflection
· 12時間前
林海滨のこの経歴は本当に素晴らしいです。AWS+OpenAI+ByteDance、veRLは阿里や研究所にも採用されており、人材の流入はByteDanceがかなりの投資をしている証拠です。
原文表示返信0
GateUser-1859b7cd
· 12時間前
MegaScaleからveRLへ、そしてリバースフローへと移行し、大手企業間の人材争奪戦はモデルのイテレーションよりも激しくなっている
原文表示返信0
GateUser-a68e8203
· 12時間前
veRLが阿里に採用されたことは、技術が確かであることの証明であり、バイトのこの一波の大儲けを意味している
原文表示返信0
YieldTuningFork
· 12時間前
OpenAIからバイトに戻り、バイトから出てまた戻る、この人材の流動は面白い
原文表示返信0
SushiStopLoss
· 12時間前
分散型トレーニング基盤を総合的に管理し、このポジションは大規模モデルのトレーニング効率の天井を直接左右します
原文表示返信0
ArbiterOfFees
· 12時間前
豆包13ドルのオプション価格設定、これはまさに現金で人を引き留めるものだ、分散型トレーニング基盤が非常に重要だ。
原文表示返信0