重みを触らず純粋にAPIを調整:Poetiq「外部プラグイン」でKimiが29.9ポイント上昇、軽量版GeminiがClaude Opusに逆襲

robot
概要作成中
AIMPACT メッセージ、5 月 15 日(UTC+8)、動察 Beating 監測によると、Google と DeepMind の元研究員 Shumeet Baluja と Ian Fischer によって設立された 6 人のスタートアップチーム Poetiq は、その Meta-System がプログラミングベンチマーク LiveCodeBench Pro で最高記録を更新したと発表しました。このシステムは純粋に API アクセス権に基づくインテリジェントなハッシェル(Harness)であり、再帰的な自己改善を通じてタスクの経験を自動的に抽出します。公式テストによると、モデルの重みを触れず、微調整を行わない前提で、このシステムは市販の主流大規模モデルのコード能力を直接向上させました。 テスト結果は、このモデルと切り離されたハッシェル方式が能力の低いモデルの向上に特に効果的であることを示しています。Poetiq システムを導入した後、Kimi K2.6 の正確率は 50.0% から 79.9% に急上昇し、絶対得点は 29.9 ポイント向上しました。軽量級の Gemini 3.0 Flash の成績も 10 ポイント向上し、自社の大容量バージョン Gemini 3.1 Pro を逆転し、Poetiq が「より大きく、より高価」と称する Claude Opus 4.7 や GPT 5.2 High を凌駕しました。 パフォーマンスの上限突破に関しては、元々 89.6% の GPT 5.5 High がハッシェルのサポートにより 93.9% の新記録に到達しました。一方、基本版 Gemini 3.1 Pro はこのハッシェルと組み合わせて 90.9% のスコアを獲得し、Google が未だ API を公開していない最強の推論モデル Gemini 3 Deep Think(88.8%)を直接上回りました。Poetiq チームは、従来の微調整は改善効果を単一モデルに固定してしまうが、彼らのこのシームレスなハッシェルは、企業が推論能力のために微調整やフルスペックモデルの展開にかかる高コストを負担せずに済むと述べています。(出典:BlockBeats)
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については免責事項をご覧ください。
  • 報酬
  • 8
  • リポスト
  • 共有
コメント
コメントを追加
コメントを追加
SeaSaltAirdropNotes
· 4時間前
純API外掛は弱いモデルを最大限に引き出せる、この考え方は非常に野性的だ、企業は大きなコストを節約できる
原文表示返信0
StargazerInTheWoods
· 4時間前
このMeta-Systemはまるでモデルに外部の大脳を開いたようなもので、経験の再利用がとても上手い。
原文表示返信0
RugpullTaster
· 5時間前
微調なしでDeep Thinkに追いつく、中小企業大喜び
原文表示返信0
TreatEarningsAsSnacks
· 5時間前
六人チームが大手企業の微調整部門を一掃、皮肉が満載
原文表示返信0
MarginMoth
· 5時間前
Claude Opus4.7がFlash+外部プラグインでクラッシュ、Anthropicは反省すべきだ
原文表示返信0
BridgeSideBanter
· 5時間前
再帰的に経験を抽出することは、まるでモデル自身がプロンプトエンジニアリングを行っているように聞こえる
原文表示返信0
GovernanceGremlin
· 5時間前
弱いモデルの外部プラグインで強化され、計算力の民主化は本当に到来したのか?
原文表示返信0
FloatingTeacupClub
· 5時間前
GPT5.5 Highはすでに93.9%に達しており、天井はさらに上に動いている
原文表示返信0
  • ピン留め