如何看待AI“一本正经地胡说八道”
创始人
2025-07-02 13:41:36
0

【现象】使用人工智能大模型时,不少人或许都遇到过类似问题:它们有时会捏造细节,甚至“一本正经地胡说八道”。比如,让它推荐书,给出的却是一堆压根不存在的书名;人物身份张冠李戴,还能给出一些并不准确的链接……这些现象都可以归为AI幻觉。

【点评】

所谓AI幻觉,可以通俗地理解为AI也会像人产生心理幻觉一样,遇到不熟悉或超出“知识储备”的问题时,编造一些并不存在的细节,生成与事实相悖的答案。一项调研显示,对于“公众认为使用AI应用过程中有哪些突出问题”,反馈最多的是“内容不准确,或含虚假信息”,占比高达42.2%。

AI幻觉从何而来?可能得从源头寻找答案。

大模型的工作原理,是基于概率生成内容。给它上半句,它就根据自己“学”过的海量知识,“算出”下半句该说什么。比如,当用户输入“今天天气非常”,它大概率会接“不错”“热”“潮湿”等答案,而不会出现“甜”。同时,大模型又不是简单地储存所有事实,而会像人脑记东西那样,进行大量压缩和泛化——也就是“抓概要、找规律”。因此,当“喂给”大模型的训练数据包含虚假信息时,它就会产生“幻觉”、给出错误答案。

有报告显示,我国生成式人工智能产品用户规模达2.49亿人。用户规模快速增长,AI幻觉潜藏的风险也随之增加。比如,如果一些看似合理却与现实相去甚远的内容被AI反复学习,会形成“数据污染—算法吸收—再污染”的恶性循环。有效防范由此带来的虚假信息泛滥,已成为不容回避的课题。

不过也有观点认为,AI幻觉可被视作一种“发散思维”和“想象力”。理论上,如果把训练一个大模型看作信息“压缩”的过程,那么大模型经过推理、输出答案就是一个信息“解压”的过程。这种处理信息的方式,可能会出现谬误,也可能触发新的创造。对发展尚未定型的新事物,要保持开放心态,辩证看待其利与弊,在有效防范弊端的同时,给予足够空间使之朝好的方向成长。

短时间内,AI幻觉问题难以被解决。各方都在努力降低其负面影响,相关部门也加大了对违规AI产品的处置力度,推动生成合成内容标识加速落地。一些大模型厂商在积极行动,比如文心大模型利用检索到的信息来指导文本或答案的生成,提高了内容的质量和准确性;通义大模型加强训练语料管理,通过“红蓝对抗”机制提升对虚假信息的识别能力。对广大用户而言,则要加快提升AI素养,学会“智慧”地运用“智慧工具”,既借助大模型破除思维定式、启发创新思路,又提高自身有效获取、理解、评估和使用信息的能力。

人类塑造工具,工具也影响人类生活。应对AI幻觉等问题挑战的过程,既促使人们思考改进工作方法,也为AI不断进化提供了源动力。激发新技术的正向价值,让AI更好融入生产生活、赋能千行百业,我们迈向智慧时代之路才能走得更加稳当、更加顺畅。

谷业凯

《人民日报》(2025年07月02日 第 05 版)

【编辑:史词】

相关内容

热门资讯

人形机器人传动系统竞赛:谁将率... 人形机器人正逐步迈向量产的门槛,其核心组件的技术探索仍处于百花齐放的状态。各大制造商在传动系统的选择...
突破传统技术瓶颈!我国团队研发... ◎ 科技日报记者 陆成宽 记者3日获悉,来自上海交通大学、国家纳米科学中心等单位的科研人员,成功研发...
《永不消逝的圆明园》在京全球首... 大象新闻记者 张子汐 郑子怡 亲身体验穿越历史,与圆明园近距离接触……7月4日,由河南广播电视台旗下...
无锡高新区智慧交通升级,打造未... 在江苏省无锡高新区,一条被誉为“超级公园道”的菱湖大道,近期迎来了科技感十足的新变革——“车路云一体...
河北:省属国企研发投入强度稳居... 在河钢集团唐钢公司,刚生产下线的2GPa超级抗氢脆热成型钢整装待发,准备出厂。这种广泛应用于汽车制造...
腾讯宣布,智能体可以打赏了 智东西AI前瞻(公众号:zhidxcomAI) 作者 | 江宇 编辑 | 漠影 智东西AI前瞻7月4...
我国科研人员在基因治疗耳聋研究... 记者7月4日从东南大学附属中大医院获悉,该院耳鼻咽喉头颈外科柴人杰教授联合多家单位在国际顶级医学期刊...
达利凯普:射频微波MLCC应用... 证券之星消息,达利凯普(301566)07月04日在投资者关系平台上答复投资者关心的问题。 投资者提...
VR大空间作品《永不消逝的圆明... 7月4日,VR大空间作品《永不消逝的圆明园》在圆明园遗址公园举行首发仪式。该项目通过前沿的虚拟现实技...
首家!虎牙公司获视听内容认证证... 深圳商报•读创客户端首席记者 董思 近日,广州虎牙信息科技有限公司获国家广播电视总局广播电视科学研究...
15位数的电话号码要来了 工业和信息化部日前通知,将部署开展号码保护服务业务试点工作。号码保护服务业务是指受快递、外卖、网约车...
公布新名单、展示新成果,门头沟... 7月4日,2025中关村论坛系列活动——“年轻 融合 未来”北京人工智能产业创新发展人才论坛举办。在...
15位数的电话号码,要来了! 工业和信息化部日前通知,将部署开展号码保护服务业务试点工作。 号码保护服务业务是指受快递、外卖、网约...
嵩隆鑫电取得贴片压敏电阻专利 ... 金融界2025年7月4日消息,国家知识产权局信息显示,惠州市嵩隆鑫电电子科技有限公司取得一项名为“一...
广东鸿铭智能取得双工位抱盒装置... 金融界2025年7月4日消息,国家知识产权局信息显示,广东鸿铭智能股份有限公司取得一项名为“一种双工...
轻松健康集团亮相全球数字经济大... 2025年7月2-5日,由北京市人民政府、国家互联网信息办公室、国家数据局、新华通讯社、联合国开发计...
软科排名碾压北大! GIS 专... 古时,地图主要服务于王侯将相、军事家和航海家。“献图”,则代表着将图中疆土和百姓奉上之意,意味着掌握...
四维智联赴港IPO,原星巴克中... 瑞财经 吴文婷近日,四维智联(南京)科技股份有限公司(以下简称“四维智联”)在港交所递交招股书,中信...
雷军转发小米YU7对比Mode... 小米集团创始人、董事长、CEO雷军今日在微博上转发汽车博主关于小米YU7对比Model Y纯高速续航...
惠亚科技申请地板自动化加工设备... 金融界2025年7月4日消息,国家知识产权局信息显示,惠亚科技(苏州)有限公司申请一项名为“地板自动...