评测结果显示,在中文语境下,国内头部语言模型的综合表现已接近国际一流水平,但存在能力发展不均衡的情况。在多模态理解图文问答任务上,开闭源模型平分秋色,国产模型表现突出。国产多模态模型在中文语境下的文生图能力与国际一流水平差距较小。多模态模型的文生视频能力上,对比各家公布的演示视频长度和质量,Sora有明显优势,其他开放评测的文生视频模型中,国产模型PixVerse表现优异。
北京市海淀区教师进修学校校长姚守梅解读大模型K12学科测试结果时指出,在语文、历史等人文学科的考试中,模型欠缺对文字背后的文化内涵以及家国情怀的理解。面对历史地理综合题时,模型并不能像人类考生一样有效识别学科属性。相较于简单的英语题,模型反而更擅长复杂的英语题。解理科题目时,模型会出现以超出年级知识范围外的方法解题的情况。当出现无法理解的考题时,模型依然存在明显的“幻觉”。
精品a区评测发现,模型在综合学科能力上与海淀学生平均水平仍有差距,普遍存在文强理弱的情况,并且对图表的理解能力不足,大模型未来有很大的提升空间。
据介绍,本次用于评测的评测体系依托科技部“人工智能基础模型支撑平台与评测技术”和工信部“大模型公共服务平台”项目,智源研究院与10余家高校和机构联合开展大模型评测方法与工具研发。
网友评论更多
22汨罗a
多家银行系金租公司接连“吃”大罚单,融资租赁款被挪成重灾区💙💚
2025-06-05 17:48:32 推荐
187****1475 回复 184****2251:全国首笔金融机构投资银行间超长期特别国债柜台业务落地广东 认购金额1000万元💛来自临湘
187****6403 回复 184****8288:任上被查!四川银行副行长杨朝晖“落马”,曾任川发资管董事长💜来自醴陵
157****9150:按最下面的历史版本💝💞来自湘乡
92韶山595
金融监管总局财险司:做到“长牙带刺” 落实五大监管💟💠
2025-06-05 17:26:14 推荐
永久VIP:上海市七部门发声:2025年末实现上海重要产业链供应链金融服务全覆盖💡来自资兴
158****9420:云南金融系统反腐风暴继续,一个多月来10名干部被查💢来自武冈
158****1614 回复 666💣:曾刚:创新型养老金融产品供给严重不足💤来自邵东
16洪江fh
净回笼550亿元!央行再度缩量续作MLF 什么信号?💥💦
2025-06-05 13:31:30 不推荐
冷水江sv:“辽宁金融监管局”、“河北金融监管局”亮相!国家金融监管总局省级派出机构的新简称来了💧
186****3501 回复 159****9936:提供中国资产投资机会 ETF国际化进程提速💨