人工智能为何会产生幻觉?
创始人
2025-06-22 07:41:08
0

在科幻电影中,人工智能常被塑造成全知全能的“超级大脑”,但现实中,AI却时常表现为“自信的谎言家”。比如,请AI描述“关公战秦琼”,它不仅能“叙述”虚构的故事情节,还会“猜测”用户喜好,煞有介事地编造不存在的文献档案。这种现象被称为“AI幻觉”,已经成为困扰许多人工智能企业和使用者的现实难题。

AI为什么会一本正经地胡说八道?根源在于其思维方式与人类存在本质不同。今天人们日常使用和接触最多的AI大模型本质上是一个庞大的语言概率预测和生成模型。它通过分析互联网上数以万亿计的文本,学习词语之间的关联规律,再像玩猜词游戏一样,逐字逐句生成看似合理的回答。这种机制使AI擅于模仿人类的语言风格,但有时缺乏辨别真伪的能力。

AI幻觉的产生与大模型训练的过程密不可分。AI的知识体系基本来源于训练时“吞下”的数据源。来自互联网的各类信息鱼龙混杂,其中不乏虚假信息、虚构故事和偏见性观点。这些信息一旦成为AI训练的数据源,就会出现数据源污染。当某个领域专业数据不足时,AI便可能通过模糊性的统计规律来“填补空白”。比如,将科幻小说中的“黑科技”描述为真实存在的技术。在AI被越来越多地用于信息生产的背景下,AI生成的海量虚构内容和错误信息正在进入训练下一代AI的内容池,这种“套娃”生态将进一步加剧AI幻觉的产生。

在大模型训练过程中,为了使AI生成满足用户需求的内容,训练者会设置一定的奖励机制——对于数学题等需要逻辑推理的问题,往往通过确认答案的正确与否给予奖励;对于写作等开放式命题,则需要判断其生成的内容是否符合人类写作习惯。为了训练效率,这种判断更多关注AI语言的逻辑性和内容格式等指标,却忽略了事实的核查。

此外,训练过程的缺陷也会导致AI存在“讨好”用户的倾向,明知道答案不符合事实,也愿意遵照指令生成迎合用户的内容,并编造一些虚假的例证或看似科学的术语来支撑自己的“假说”。这种“角色扮演式”的表达让许多普通用户难以分辨AI幻觉。上海交通大学媒体与传播学院进行的一项全国抽样调查显示,约七成受访者对大模型生成虚假或错误信息的风险缺乏清晰认知。

如何破解AI幻觉?开发者尝试通过技术手段为AI“纠偏”。比如“检索增强生成”技术,这意味着AI在回答前需要从最新的数据库检索相关信息,降低“信口开河”概率;一些模型被要求在不确定答案时主动承认“不知道”,而非强行编造答案。不过,由于目前的AI无法像人类那样理解语言背后的真实世界,因此这些方法难以从根本上解决AI幻觉问题。

应对AI幻觉,不仅需要技术规制,也需要从公民AI素养普及、平台责任、公共传播等维度构建系统性的“幻觉免疫力”。AI素养不仅包含使用AI的基本技能,更重要的是对AI幻觉要有基本的认知能力。明确技术平台的责任边界同样重要,AI产品在设计时就应嵌入风险提示机制,自动标记“可能存在事实性错误”等警示内容,并提供方便用户进行事实核查和交叉验证的功能。媒体可以通过定期发布AI伪造事实的典型案例,进一步培养公众的识别能力。通过多方联手,智能时代的认知迷雾才能被真正破除。

(作者为上海交通大学媒体与传播学院特聘教授,本报记者黄晓慧采访整理)

来源:人民日报

作者: 徐 剑

相关内容

热门资讯

广州盛原成申请PLC数据采集相... 金融界2025年6月21日消息,国家知识产权局信息显示,广州盛原成科技有限公司申请一项名为“PLC数...
2025云手机新宠:掌派云手机... 在2025年的云手机市场,一款结合免费试用与强大功能的新产品——掌派云手机,正迅速赢得用户的青睐。掌...
我国两台太阳系天体观测望远镜开... 【我国两台太阳系天体观测望远镜开建 建成后将实现多个“第一”】财联社6月21日电,由中国科学院紫金山...
美拟取消芯片技术豁免,反制中国... 业内人士表示,美方加强限制措施不会立即迫使相关芯片工厂关闭,但随着时间的推移,它们可能会发现有效运营...
京产手术机器人屡创全球之先 北京术锐机器人股份有限公司研制的SR-ENS-600是中国第一款获批上市的腹腔内窥镜单孔手术系统,产...
青岛峰会展现开放引力 跨国公司... 赵彬彬 朱亚婷 记者 陈芳 6月19日,一台人形机器人在第六届跨国公司领导人青岛峰会嘉宾通道上提问...
销售人员诋毁竞品?最新回应:并... 6月21日,有关小米的多个词条冲上微博热搜。 据悉,近期网络上出现疑似“小米销售人员与用户沟通小米Y...
Calibre 8.5 更新:... 2025-06-21 11:40:41 作者:狼叫兽 开源电子书管理工具 Calibre 近日发布...
从“边干边学”到创造价值 AI... 人工智能,是近两年最为火热的话题之一。各行各业都在尝试使用这一颠覆性技术来提升效率、变革生产方式,过...
共谋发展!这场交流会助力瑞士企... 日前,瑞士布鲁法尔创新中心在杨浦成立,致力于中瑞两国之间经贸、文化、科技领域的合作和友好交流。作为“...
金利小程序开发 在如今的数字化时代,金利小程序开发逐渐成为金融科技领域的重要一环。许多人对于金利小程序的概念和功能仍...
西安科技助力卫星身兼数职 本报讯(记者 关颖)6月20日20时37分,中星9C卫星在西昌卫星发射中心成功发射,卫星进入预定轨道...
莞深携手!大湾区综合性国家科学... 6月21日,大湾区综合性国家科学中心先行启动区科学联盟(以下简称“科学联盟”)成立大会在深圳科学技术...
人工智能为何会产生幻觉? 在科幻电影中,人工智能常被塑造成全知全能的“超级大脑”,但现实中,AI却时常表现为“自信的谎言家”。...
联合微电子中心申请光学起偏器、... 金融界2025年6月21日消息,国家知识产权局信息显示,联合微电子中心有限责任公司申请一项名为“光学...
原创 人... 蚂蚁庄园教育:人类历史上首次“人机大战”发生在哪个体育项目? 关于,吃多了砂糖橘会变小黄人是真的假的...
上海析钛取得节流截止阀专利,减... 金融界2025年6月21日消息,国家知识产权局信息显示,上海析钛流体科技有限公司取得一项名为“节流截...
华尔特机电取得具有防尘功能外转... 金融界2025年6月21日消息,国家知识产权局信息显示,浙江华尔特机电股份有限公司取得一项名为“一种...
以创新为引擎 康缘药业驱动中药... 在风云变幻的医药行业浪潮中,唯有创新与坚守方能行稳致远。康缘药业,这家深植于中医药沃土的企业,始终将...
双鹤湖畔 “芯”光璀璨——郑州... □ 河南日报客户端记者 杨凌 河南日报社全媒体记者 高利国/文 徐聪/图 6月20日上午10点,郑州...