尽管在基准测试中得分最高,Motif Technologies 仍被排除在韩国的人工智能项目之外。

snys94942026-08-28 08:55:32news.einfomax.co.kr

韩国科学技术信息通信部于27日公布了其独立人工智能基础模型项目第二轮评估的详细分数。结果显示,尽管 Motif Technologies 在全球 AAII 基准测试中得分最高,仍然被淘汰。争议源于用户评估分数最终决定了排名结果:在该项评估中,Motif 获得 14.1 分,而排名第一的 SK Telecom 获得 19.1 分。这是“Dokpamo”项目第二次出现评估争议,此前 Naver Cloud 曾因不符合独立性标准而被淘汰。

部委公布详细评估分数

韩国科学技术信息通信部公布的完整评分明细显示,SK Telecom 以 70.6 分排名第一,随后依次为 Upstage(69.9 分)、LG AI Research(69.0 分)和 Motif(65.8 分)。Motif 在 AAII 评估中获得 11.9 分,在用于评估韩语能力和可靠性的 NIA 基准测试中获得 12.7 分,两项基准测试合计 24.6 分,为四支团队中最高。然而,Motif 在专家评估中仅获得 27.1 分,是四支团队中最低的。

用户评估决定最终结果

用户评估分数被证明是决定最终排名的关键因素。根据已公布的分数反推,Motif 在用户评估中获得 14.1 分,而 SK Telecom 获得 19.1 分,双方相差 5 分。SK Telecom 与 Motif 的最终得分相差 4.8 分,这表明用户评估实际上决定了淘汰结果。

关于评估标准的争论仍在继续

Motif 认为,基础模型的价值在于具备可跨行业、跨服务扩展的基础性能,而不只是提供聊天机器人的便利性。政府表示,评估不仅要考察模型性能,还必须全面评估其实际可用性和应用潜力。该部表示,评估标准和方法此前已与参与企业协商确定,当时没有收到任何异议。Motif 在结果公布后宣布不参加第三轮评估。

常见问题

四家人工智能公司在韩国基础模型评估中分别获得了多少分?

在27日公布的第二轮评估中,SK Telecom 以 70.6 分排名第一,Upstage 获得 69.9 分,LG AI Research 获得 69.0 分,Motif 获得 65.8 分。

为什么 Motif 在人工智能基准测试中得分最高,却仍然被淘汰?

Motif 以 24.6 分的基准测试总成绩排名第一,但其专家评估得分最低,仅为 27.1 分;同时,其用户评估得分为 14.1 分,而 SK Telecom 为 19.1 分。最终两者的总分相差 4.8 分,导致 Motif 被淘汰。


疑似 Ethena 相关地址再提取 2500 万枚 ENA,累计提币达 4.05 亿枚

据Lookonchain监测,疑似与EthenaLabs关联的地址在约3小时前再次从Bybit提取2500万枚ENA,价值约600万美元。自11月7日以来,该主体已从Bybit与CoinbasePrime累计提取4.0515亿枚ENA,按当前价格估算约9680万美元。...

Alliance DAO 合伙人 QW:L1 缺乏护城河,长期价值应在应用层而非基础设施

Dragonfly管理合伙人Haseeb发文为“L1的指数级增长辩护”:L1链并非靠当前营收(如P/E比率)定价,而是基于指数级增长潜力——类似于亚马逊前22年亏损却最终爆发。他回顾DeFi和稳定币从百万美元TVL到千亿规模的跃升...

存款规则变更后,韩国单一股票杠杆 ETF 交易量暴跌 93%

韩国交易所8日公布的数据显示,韩国单一股票杠杆及反向ETF的交易额在7日暴跌至8452亿韩元,低于上月30日录得的12.4485万亿韩元,减少11.6033万亿韩元。此次大幅收缩发生在上月31日实施监管调整之后。该调整将基于三...

美国证券交易委员会电子送达提案聚焦投资基金披露信息

美国证券交易委员会(SEC)正在推进一项电子送达提案,该提案将改变投资者接收投资披露信息的方式。该规则将影响投资者从基金和券商处收到的招股说明书、基金通知以及其他文件。随着数字资产敞口进一步进入受监管市...

CLARITY Act面临八月前关键的四周参议院窗口期

数字资产立法已进入关键参议院阶段,加密倡导者敦促立法者在8月前推进《清晰法案》。Solana政策研究所总裁、前BlockchainAssociation(区块链协会)首席执行官KristinSmith周三在X上表示,支持者将7月13日至8月7日的...

上一篇:韩国股市下跌,美国半导体关税谈判令市场承压
下一篇:Dollar Tree 和 Dollar General 在各收入阶层的客流量均大幅增长