尽管在基准测试中得分最高,Motif Technologies 仍被排除在韩国的人工智能项目之外。
韩国科学技术信息通信部于27日公布了其独立人工智能基础模型项目第二轮评估的详细分数。结果显示,尽管 Motif Technologies 在全球 AAII 基准测试中得分最高,仍然被淘汰。争议源于用户评估分数最终决定了排名结果:在该项评估中,Motif 获得 14.1 分,而排名第一的 SK Telecom 获得 19.1 分。这是“Dokpamo”项目第二次出现评估争议,此前 Naver Cloud 曾因不符合独立性标准而被淘汰。 部委公布详细评估分数 韩国科学技术信息通信部公布的完整评分明细显示,SK Telecom 以 70.6 分排名第一,随后依次为 Upstage(69.9 分)、LG AI Research(69.0 分)和 Motif(65.8 分)。Motif 在 AAII 评估中获得 11.9 分,在用于评估韩语能力和可靠性的 NIA 基准测试中获得 12.7 分,两项基准测试合计 24.6 分,为四支团队中最高。然而,Motif 在专家评估中仅获得 27.1 分,是四支团队中最低的。 用户评估决定最终结果 用户评估分数被证明是决定最终排名的关键因素。根据已公布的分数
Oliver Grant·08-28 00:31
