27Bパラメータモデルは16GBのGPUで動作し、推論能力はClaude 4 Opusに近いとされている

robot
概要作成中

MEニュースの情報、4月1日(UTC+8)。近日、27Bパラメータ規模のモデルが、ローカルの16GBメモリGPU上で4ビット量子化で動作させたところ、SWE-benchベンチマークでClaude Sonnet 4.5よりも優れた結果を示したという情報がありました。記事の見解によれば、このモデルはClaude 4 Opusに匹敵する推論能力を提供できる一方で、必要なリソースはより少ないとのことです。このモデルのv2バージョンでは、思考連鎖(chain-of-thought)の冗長性を24%削減しつつ、HumanEvalの正確性は96.91%を維持しています。(出典:InFoQ)

原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • コメント
  • リポスト
  • 共有
コメント
コメントを追加
コメントを追加
コメントなし
  • ピン