文章来源:08AI导航网发布时间:2025-03-14 11:42:13
AI奇点网5月6日报道丨日前,国内人工智能大模型研究公司百川智能发布公众号文章称,国内最权威的大模型评测机构 SuperCLUE 发布了《中文大模型基准测评 2024 年度 4 月报告》,报告选取国内外具有代表性的 32 个大模型 4 月份的版本,通过**度综合性测评,对国内外大模型发展现状进行观察与思考。
报告显示,百川智能的 Baichuan 3 在国内大模型中排名第一,智谱 GLM-4、通义千问 2.1、文心一言 4.0、月之暗面(Kimi)等大模型位列其后。从全球范围来看,国外同行的 GPT-4、Claude3 得分更胜一筹。
测试结果显示,Baichuan3 的文科、理科能力均衡。在知识百科能力上 Baichuan 3 以 82 分的成绩超越了 GPT-4 Turbo,在所有 32 个参与评测的国内外大模型中排名第一。而在代表了大模型智力的“逻辑推理”能力上以 68.60 的成绩超越 Claude 3-Opus,也力压一众国内大模型拔得头筹。此外,在计算、代码、工具使用能力上 Baichuan 3 表现同样不俗,均排名国内前三。
SuperCLUE 是国内通用大模型综合性测评基准,其前身是第三方中文语言理解测评基准 CLUE(The Chinese Language Understanding Evaluation)。据介绍,SuperCLUE 本次测评由十大基础任务组成,包括逻辑推理、代码、语言理解、长文本、角色扮演等,题目为多轮开放式简答题。评测集共 2194 题。
不同于传统测评通过选择题形式的测评,SuperCLUE 纳入了开放主观问题的测评。通过**度多视角多层次的评测体系以及对话的形式,模拟大模型应用场景,真实有效的考察模型生成能力。同时,SuperCLUE 通过构建多轮对话场景,更深层次考察大模型在真实多轮对话场景的应用效果,对大模型的上下文、记忆、对话能力全方位评测。
相关攻略 更多
SuperCLUE发布最新4月中文大模型测评:百川智能Baichuan 3综合评分位列国内第一,部分能力超OpenAI
高通推出新一代骁龙X Elite / X Plus处理器,基于AI PC打造,赋能个人移动电脑转向人工智能时代
Remini“黏土”滤镜玩法刷屏,幕后公司揭晓丨苹果将采用自研大模型改进iOS 18丨奥特曼MIT讲话:AI创业机会巨大
五一假期全网刷屏的人气AI修图软件「Remini」实测:除了生成丑萌的黏土人,我们还发现了更多玩法
OpenAI与Stack Overflow合作,将增强ChatGPT编程能力
5月爆款丨AI图像编辑软件Remini的前世今生:幕后公司是“炒冷饭”高手,长期霸榜下载之王,年入上亿美元
烧掉500亿美元在所不辞!OpenAI奥特曼:将不惜一切代价推动人类迈向AGI的发展
美军高调宣布:基于人工智能驱动,实现首次「AI战斗机」自动驾驶飞行任务!空军部长亲自试乘,全程人工未干预
最新资讯 更多
SuperCLUE发布最新4月中文大模型测评:百川智能Baichuan 3综合评分位列国内第一,部分能力超OpenAI
更新时间:2025-03-14
高通推出新一代骁龙X Elite / X Plus处理器,基于AI PC打造,赋能个人移动电脑转向人工智能时代
更新时间:2025-03-14
Remini“黏土”滤镜玩法刷屏,幕后公司揭晓丨苹果将采用自研大模型改进iOS 18丨奥特曼MIT讲话:AI创业机会巨大
更新时间:2025-03-14
五一假期全网刷屏的人气AI修图软件「Remini」实测:除了生成丑萌的黏土人,我们还发现了更多玩法
更新时间:2025-03-14
OpenAI与Stack Overflow合作,将增强ChatGPT编程能力
更新时间:2025-03-14
5月爆款丨AI图像编辑软件Remini的前世今生:幕后公司是“炒冷饭”高手,长期霸榜下载之王,年入上亿美元
更新时间:2025-03-14
烧掉500亿美元在所不辞!OpenAI奥特曼:将不惜一切代价推动人类迈向AGI的发展
更新时间:2025-03-14
美军高调宣布:基于人工智能驱动,实现首次「AI战斗机」自动驾驶飞行任务!空军部长亲自试乘,全程人工未干预
更新时间:2025-03-14
微软启动备份项目!自研5000亿参数大模型「MAI」,力邀谷歌前DeepMind团队CEO加盟带队
更新时间:2025-03-14
月之暗面发布Kimi+专业版:AI助手再升级,财报分析、文案创作、研报轻松生成
更新时间:2025-03-14