広場
最新
注目
ニュース
プロフィール
ポスト
SOOHAKベンチマークはAIモデルの欠陥を明らかにする:解けない数学問題の識別能力は50%を超えていない
MeNews
2026-06-06 19:59:07
フォロー
概要作成中
AIMPACT メッセージ、5 月 17 日(UTC+8)、64 位数学者連盟によって作成された新しいAI数学ベンチマークテスト SOOHAK は、AIモデルの重要な欠陥を明らかにしました。このテストには439の手書き課題が含まれ、そのうち99の課題は意図的に解答不能に設計されています。Google Gemini 3 Pro は研究レベルの問題でリードし、30%の正確率を達成しましたが、どのモデルも解答不能な課題を識別することにおいて50%を超えることはできませんでした。研究により、より多くの計算資源はモデルの問題解決能力を向上させることができる一方で、その問題が解答不能であることを認識する能力を強化することはできないことが判明しました。SOOHAK は、AI の少数の優れた成果と、システムが依然として欠いている広範な研究スキルとのギャップを定量化することを目的としています。
原文表示
このページには第三者のコンテンツが含まれている場合があり、情報提供のみを目的としております(表明・保証をするものではありません)。Gateによる見解の支持や、金融・専門的な助言とみなされるべきものではありません。詳細については
免責事項
をご覧ください。
報酬
いいね
コメント
リポスト
共有
コメント
コメントを追加
コメントを追加
コメント
コメントなし
人気の話題
もっと見る
#
ShareYourUSStocksWinNvidia
3.53M 人気度
#
PredictNBAChampionWin20000U
2.18M 人気度
#
IsraelStrikesIranBTCPlunges
55.05K 人気度
#
BitcoinETFSees7272BTCOutflow
657.53M 人気度
#
SpaceXRoadshowHighlightsAsteroidMining
1.39M 人気度
ピン留め
サイトマップ
SOOHAKベンチマークはAIモデルの欠陥を明らかにする:解けない数学問題の識別能力は50%を超えていない