中文大模型忠实性幻觉评测:豆包大模型幻觉率4%全球最低,超GPT-4o等中外模型
创始人
2025-05-24 01:41:55
0

近日,根据SuperCLUE 发布的最新一轮中文大模型忠实性幻觉测评结果,豆包大模型1.5 Pro(Doubao-1.5-pro-32k)以仅4%的幻觉率、96%的准确率排名总榜第一,超越 DeepSeek-R1、DeepSeek-V3、Gemini-2.5-pro、GPT-4o-latest 等中外主流模型。

在涵盖文本摘要、多文本问答、对话补全等关键任务的细分评测中,豆包大模型1.5 Pro也均位列全球第一,在阅读理解任务中,其准确率则为国内最高,展现出在复杂语言理解与生成场景中的出色能力。

SuperCLUE 由独立第三方推出,是当前中文大语言模型评测的重要基准体系。其中 SuperCLUE-Faith 聚焦中文内容生成过程中的忠实性与幻觉控制能力,从文本摘要、阅读理解、多文本问答以及对话补全等角度展开测评,对象包括国内外共计16款具有代表性的模型,评估结果具备较强公信力与行业参考价值。

目前,豆包大模型家族已覆盖全模态、全场景,包括大语言模型、深度思考模型、视觉理解模型、语音大模型,以及图像、视频等视觉大模型,企业可以通过字节跳动旗下云服务平台火山引擎使用豆包大模型API服务。其中, 豆包大模型1.5 Pro 基于 MoE 架构构建并采用训练-推理一体化设计思路,在保证高性能的同时显著降低推理成本。通过激活有限参数实现对大规模场景的精准理解与生成,其综合性能已超过多款超大稠密预训练模型。

截至2025年3月底,豆包大模型日均 tokens 调用量已超过12.7万亿,是2024年12月的3倍,是一年前刚刚发布时的106倍。IDC 报告显示,2024年中国公有云大模型调用量激增,火山引擎以46.4%的市场份额位居中国市场第一。

据悉,火山引擎将于6月11日在北京举办FORCE原动力大会,将带来豆包大模型的最新升级进展与能力进化。

相关内容

热门资讯

赳赳秦风与科创浪潮交织激荡 陕汽重卡的智能生产线 秦创原·氢合湾科创区 《赳赳大秦》的舞台 “全国主流媒体看陕西” 采访团深入...
行业追踪|固体激光器领域科研院... Q 固体激光器的发展历程如何? A 1960 年,T.H. 梅曼发明世界上第一台激光器 —— 红宝石...
OpenAI买下苹果设计之神 ... 65亿美元,身处软件领域的OpenAI“购买”到了苹果产品设计的“灵魂”,期望再现30年前苹果带来的...
山东浩信取得一种气门导管供料机... 金融界2025年5月23日消息,国家知识产权局信息显示,山东浩信股份有限公司取得一项名为“一种气门导...
河南安阳县:深耕科创沃土 壮大... 央广网安阳5月23日消息(记者 张羲轮 通讯员 栗振华)近日,走进位于河南省安阳县瓦店乡的河南旭阳光...
美的集团获得发明专利授权:“出... 证券之星消息,根据天眼查APP数据显示美的集团(000333)新获得一项发明专利授权,专利名为“出风...
填补行业空白!宁夏枸杞鲜果原浆... 近日,宁夏农林科学院枸杞科学研究所传来喜讯,其承担的“枸杞鲜果原浆质量评价研究”项目成功获批自治区科...
百度为什么要跟罗永浩交朋友 作者 | 蓝媒汇 叶二 百度,再一次猛攻电商。 就在两天后的5月23日,罗永浩将于晚8点在百度优...
杭州人通管业取得密封性好的MP... 金融界2025年5月23日消息,国家知识产权局信息显示,杭州人通管业有限公司取得一项名为“一种密封性...
孔子博物馆《彣彩中国》特展:解... 中新网山东曲阜5月23日电 (记者 沙见龙)“彣”字最早出现在战国时期,意指花纹或色彩。“彣彩”承载...
新华全媒+丨现代农机装备驰骋“... 连日来,黑龙江垦区播种、插秧、田间管理火热进行,搭载着先进设备的现代农机装备,在田野纵横驰骋。目前,...
加码双万亿赛道!山高控股打造“... 能源行业常说一句话:“人工智能的尽头是算力,算力的尽头是电力。” 在大模型驱动下,人工智能技术加速演...
西西艾尔取得压盖装置专利,能有... 金融界2025年5月23日消息,国家知识产权局信息显示,上海西西艾尔启东日用化学品有限公司取得一项名...
圣释生物:探索生命奥秘,引领干... 转自:蚌埠新闻网 树立行业标杆,讲好中国故事,传递中国声音,充分展现腾飞的中国经济、崛起的民族品牌和...
海信空调取得空调室外机专利,避... 金融界2025年5月23日消息,国家知识产权局信息显示,海信空调有限公司取得一项名为“空调室外机”的...
大批小学生来看展,他们在文博会... 新京报讯(记者张建林)5月23日下午,来自深圳市福田区实验教育集团侨香学校的一批小学生来到深圳文博会...
报告:近半数教师认为学生写论文... 中新网北京5月23日电(记者 邵萌)今年毕业季,论文与AI技术的碰撞再度成为热门话题。近日,麦可思研...
中南电力设计院取得一种多功能供... 金融界2025年5月23日消息,国家知识产权局信息显示,中国电力工程顾问集团中南电力设计院有限公司取...
中文大模型忠实性幻觉评测:豆包... 近日,根据SuperCLUE 发布的最新一轮中文大模型忠实性幻觉测评结果,豆包大模型1.5 Pro(...
中国四大国之重器登场,C919... 前言 要说最近谁最风光?那必须是咱们中国!大国重器一个接一个放大招,直接把外国媒体看懵了,连发感叹...