ME News ニュース、4月12日(UTC+8)、最近、AIエージェントの性能に関するテストによると、エージェントの検索タスク(BrowseComp)において、SonnetモデルとOpusアドバイザーをペアで使用すると、タスク成功率が58.1%から60.4%に向上した。エージェントのエンドポイントコーディングタスク(Terminal-Bench 2.0)では、性能が59.6%から63.4%に跳ね上がった。記事の見解では、これはOpusが難易度の高いタスクに対して高精度の戦略計画を提供しているためかもしれない。(出典:InFoQ)
SonnetとOpusコンサルタントのペアリングがエージェントのタスク成功率を向上させる
ME News ニュース、4月12日(UTC+8)、最近、AIエージェントの性能に関するテストによると、エージェントの検索タスク(BrowseComp)において、SonnetモデルとOpusアドバイザーをペアで使用すると、タスク成功率が58.1%から60.4%に向上した。エージェントのエンドポイントコーディングタスク(Terminal-Bench 2.0)では、性能が59.6%から63.4%に跳ね上がった。記事の見解では、これはOpusが難易度の高いタスクに対して高精度の戦略計画を提供しているためかもしれない。(出典:InFoQ)