国連、GoogleとAI対応型データプラットフォームを立ち上げ ユニセフ調査で、LLMの開発データに対する平均精度は21.2%と判明
国連は木曜日、自然言語によるクエリとModel Context Protocol(MCP)を通じて、AIシステムが国連の統計データをより利用しやすくするために設計されたプラットフォーム「UN System Data Commons」の立ち上げに向け、Googleと提携すると発表した。 UNICEFは、GPT-4o、Claude Sonnet 4.5、Gemini 2.5 Flashを含む6つの主要な言語モデルが、133,000件を超えるテスト回答において、世界の開発指標に関する質問に答えた際の平均正答率がわずか21.2%だったことを示すベンチマーク調査を発表した。約5件に3件の回答は、そもそも利用可能な数値を提示できなかった。Google.orgはこのプラットフォームの設立に200万ドルを提供し、26の国連機関が参加を約束しており、立ち上げ時点では約20機関のデータが利用可能になる。国連は2027年までに、統計データセットの80%をこのプラットフォームへ移行することを目指している。
GateNews·09-18 09:44
