React 專項實測:GPT-5.6 在 Sol 第一,但最佳成績僅 43.1%

robot
摘要生成中
根據 Beating 監測所示,專注 React 開發工具的 Million 團隊推出 ReactBench v1,測試 AI 編程 Agent 能否完成真實的 React 開發任務,並避免引入新的程式碼問題。

React 是用於建置網站與 App 介面之主流 JavaScript 函式庫。Million 先前已開發 React Scan、React Doctor 與 Million.js 等開源工具。

ReactBench 從開源專案中篩出 51 項真實任務。除了檢查功能能否運作外,它還透過 400 多條規則排查程式錯誤、效能、無障礙與程式碼品質問題。

GPT-5.6 Sol 以 43.1% 的綜合得分居首,Fable 5 為 41.2%。官方表示兩者差距較小,暫時無法確認 Sol 明顯更強。同為 XHigh 設定時,Fable 5 的單次測試成本約為 Sol 的 6.3 倍。

即使是成績最高的設定,成功完成的任務也不到一半。在 4455 次新功能開發測試中,各模型共引入 1194 個 React 問題,其中 77.5% 是程式錯誤或安全問題。
查看原文
此頁面可能包含第三方內容,僅供參考(非陳述或保證),不應被視為 Gate 認可其觀點表述,也不得被視為財務或專業建議。詳見聲明
  • 打賞
  • 回覆
  • 轉發
  • 分享
回覆
請輸入回覆內容
請輸入回覆內容
暫無回覆
  • 已置頂