關注全球時事|洞察國際風雲
2025-03-18 17:24 星期二

AI幻觉频现 风险挑战几何

时间:2025-08-19 10:04 来源:快讯社

  当前,人工智能技术快速发展,但大模型“自说自话”、一本正经“胡说八道”、生成偏离事实内容的问题日益凸显,这一现象被称为“AI幻觉”。不少业内人士提醒,由于大模型主要基于概率生成文本而非逻辑推理,在短期内难以完全避免此类问题。

  《瞭望》新闻周刊记者观察到,AI虚构事实或逻辑混乱的“幻觉”已在法律、内容创作、专业咨询等多个领域造成实际影响。

  AI技术的发展方兴未艾,但确保其生成内容的真实性和可靠性,尤其需要技术开发者、监管机构共同努力。针对“AI幻觉”问题,业界建议,在技术层面,要持续优化模型架构,增强事实核查能力;在监管层面,需完善相关规范,明确责任边界。

AI幻觉 AI辅助设计

  幻觉频现

  “AI幻觉”已经成为当前AI技术发展中最突出的技术瓶颈之一。从技术层面来看,AI幻觉的产生主要源于三个方面的原因:首先是训练数据的不足或偏差,导致模型对某些领域的认知存在缺陷;其次是算法架构的局限性,当前主流大模型主要基于概率预测而非逻辑推理;最后是训练目标的设定问题,模型往往更倾向于生成“流畅”而非“准确”的内容。

  “AI幻觉主要表现为事实性幻觉和逻辑性幻觉两种。”业内人士介绍,事实性幻觉,表现为模型会编造完全不存在的事实或信息。这种情况在专业领域尤为突出,如在法律咨询中虚构判例,在医疗诊断中给出错误结论,或杜撰历史事件。逻辑性幻觉,表现为模型在长文本生成或连续对话中出现前后矛盾、逻辑混乱的情况,这主要是因为当前大模型的注意力机制在处理复杂语境时存在局限性。

  多项研究证实了AI幻觉问题的严重性。今年3月,哥伦比亚大学数字新闻研究中心针对主流AI搜索工具进行的专项测试发现,这些工具在新闻引用方面的平均错误率达到60%。一些研究显示,AI并不擅长辨别“新闻事实来自哪里”,会出现混淆信息来源、提供失效链接等问题。更令人担忧的是,随着模型规模的扩大,某些类型的幻觉问题不仅没有改善,反而呈现加剧趋势。

  多位业内专家认为,AI幻觉问题在现有技术框架下难以彻底解决。思谋科技联合创始人刘枢表示,当前的大模型架构决定了其本质上是一个“黑箱”系统,优化结构等方式只能缓解模型幻觉问题,很难完全避免幻觉的产生。

  有受访者从认知科学的角度分析,当前的大模型处于“我不知道我知道什么”的状态,缺乏对自身知识边界的准确判断能力。这些技术特性决定了AI幻觉问题的存在,需通过多方面的技术改进来逐步缓解。

  警惕风险

  业界普遍认为,在AI幻觉短期内难以完全消除的背景下,其潜在风险已从信息领域蔓延至现实世界,可能带来较大风险。

  世界经济论坛《2025年全球风险报告》已将“错误和虚假信息”列为全球五大风险之一,其中AI生成的幻觉内容被视作关键诱因之一。

  AI幻觉最直接的危害是造成“信息污染”。在法律领域,美国纽约南区联邦法院在审理一起航空事故诉讼时发现,原告律师提交的法律文书中引用了ChatGPT生成的6个虚假判例,这些虚构案例包括完整的案件名称、案卷号及法官意见,甚至模仿了美国联邦最高法院的判例风格,其虚构能力干扰了司法程序。

  金融咨询领域,AI可能给出错误投资建议,如误读财报数据或虚构企业信息。

  更令人担忧的是,这些错误信息可能被其他AI系统吸收,形成“幻觉循环”——错误数据不断被强化,最终污染整个信息生态。

  随着AI技术向实体设备领域渗透,幻觉问题的影响已超越虚拟范畴,可能对人身安全构成威胁。在自动驾驶领域,生成式AI被用于实时路况分析和决策制定。业内人士表示,在复杂路况中,自动驾驶若产生“感知幻觉”,可能导致系统误判环境,触发错误决策,直接威胁行车安全。

  人形机器人领域风险更值得关注。优必选副总裁庞建新说:“当机器人因幻觉做出错误动作时,后果远超文本错误。”例如,护理机器人可能误解指令给患者错误用药,工业机器人可能误判操作参数造成生产事故。这些场景中,AI幻觉甚至可能威胁人身安全。

  协同治理

  对于AI幻觉问题带来的挑战,业内人士建议从技术创新、制度监管等多个维度构建综合治理体系。

  技术创新是解决AI幻觉问题的根本途径。近年来,业界已提出多种技术方案来应对这一挑战。刘枢等介绍,检索增强生成(Retrieval-augmented Generation,RAG)技术融合了检索与生成模型优势,是当前重要的发展方向之一。其通过将大模型与权威知识库实时对接,能显著提升生成内容准确性。

  全国政协委员、360集团创始人周鸿祎提出“以模制模”,构建专业知识库,实施合理的矫正机制,构建更完善的安全防护体系,降低“幻觉”带来的负面影响。例如,研发专用的安全大模型来监督知识库使用和智能体调用,并采用多模型交叉验证、搜索矫正等技术手段来识别和纠正幻觉。

  制度监管方面需要建立多层次的治理体系。云天励飞品牌运营中心总经理胡思幸认为,要完善监管治理,研究AI生成内容“数字水印+风险提示”双重标识,为AI生成内容提供有效的溯源和警示机制。针对日益突出的AI造谣问题,法律界人士建议,要持续完善相关规定,明确利用AI造谣的法律责任,加大对违法行为的惩处力度。

  治理体系之外,当前阶段,在用户使用AI开展工作时,亦需要建立对AI能力的理性认知,了解其局限性。培养多渠道验证信息的习惯,优先选择权威、可信赖的媒体或机构作为信息来源,这些基本素养的提升将有效降低AI幻觉的社会影响。同时,在与AI系统交互时应保持必要的怀疑态度和批判思维,多渠道核查验证信息的准确性。

外交部:将本着科学原则研究日方关于恢复水产品输华请求
外交部:坚决反对美国向中国台湾地区出售武器
测试视频
综合看点 查看更多>>
欧洲使用俄被冻结资产仍存疑 俄部署“榛树”导弹作为战略威慑
马杜罗:联合国须抵制美国对委威胁言论
731部队反人类罪行,铁证如山!
“走读中柬”文化市集惊艳柬埔寨街头
泰柬冲突仍在继续 泰国又一地实施宵禁
纵横天下 查看更多>>
苏丹人道灾难被评价为2025年“最被忽视的危机”
高市早苗遭嘘!涉台错误言论在日国会被连番质问
“乌克兰国际索赔委员会”在荷兰成立 俄斥欧“法律侵略”
中国代表呼吁维护战后国际秩序
铁证如山!中央档案馆公布一批日本731部队罪行档案
近观德国对二战罪行的反思
加拿大重申要在格陵兰岛设领事馆
走进南极
墨西哥一小飞机坠毁致7人死亡
阿根廷首次向中国出口小麦
鼓吹右翼观点 煽动对华仇恨——起底日本网络舆论操弄黑手
中国海军“丝路方舟”号医院船完成对牙买加医疗服务启程前往巴巴多斯
英媒:特朗普批欧洲引分歧 有人劝冯德莱恩“忍气吞声”
极右翼当选 智利总统选举扯动拉美政治格局
德国总理:欧洲须做好与美国关系发生根本性变化准备
谱写新时代中国高水平对外开放的崭新篇章——写在海南自由贸易港正式启动全岛封关之际
王毅同委内瑞拉外长希尔通电话
王毅在结束对阿拉伯三国访问后接受中国媒体采访
这些血淋淋的证据,让世人了解日军暴行!
我国原油产量今年有望创新高 预计达到2.15亿吨
中国代表敦促叙利亚过渡政府履行反恐义务
光热发电让中国“沙戈荒”变身绿电宝库
习近平听取岑浩辉述职报告
习近平听取李家超述职报告
青岛胶州湾第二隧道盾构掘进突破3000米
国台办:要求美方立即停止“武装台湾”
发挥独特优势 积极把握“十五五”发展机遇——习近平主席重要讲话鼓舞香港各界奋发前行
把握时代机遇 更好融入和服务国家发展大局——习近平主席重要讲话为澳门发展注入动力指明方向
国防部:赖清德当局谋“独”挑衅是害台毁台的最坏毒瘤
香港赛马国际赛游客人数创单日新高
民生领域反垄断执法再加力 平台经济成重点
绿电直达——雄安500千伏超高压变电站投运
渤西油气处理厂今年向天津供应天然气超4亿立方米
广东实施“百千万工程”破解区域协调的发展难题纪实
108新线高速打通首条隧道 长达1760米 采用双向四车道
中菲合作遣返重要红通人员
人民法院大力推进清理政府机关、事业单位拖欠中小企业账款工作
各地开展普法宣传 迎接国家宪法日
河南省高级人民法院原副巡视员刘国松接受纪律审查和监察调查
警惕军事藏品背后的违法交易
美味松露,缘何成中国新“土特产”
湖北长阳:清江椪柑采销忙
赤溪村的乡村振兴新气象
荒坡变绿坡 “金果”富山乡
山东荣成:海带“插秧”正当时
把二级以下医院“转型”成医养结合,是条好路吗?
国家医保局:力争明年实现生娃基本“不花钱”
国家卫生健康委党组传达学习贯彻中央经济工作会议精神
全国县级中医院中,承德县中医院为何能首家通过县域肿瘤防治中心评估
安宁疗护如何“向下扎根”
前沿科技 查看更多>>
我国“首例二维金属制备”入选年度科学突破
意念打字!科幻里的脑机接口要成真了吗?
工业母机产业锚定市场攀高峰
AI变身“智能伙伴”,中国迎来智能经济新时代
我国科研人员突破海水制氢提镁联产技术
健康生活 查看更多>>
科学与健康|从探洋识冰到巡天瞰海!我国海洋卫星大显身手
自动驾驶企业加速出海 重点布局新兴市场
元宇宙正从概念炒作回归理性
超微型调制器实现高精度激光操控
我国数据要素市场化配置改革进入高质量平稳发展期
实用技术 查看更多>>
部分车型获准入许可 L3级自动驾驶大规模落地还有多远?
智能驾驶将跻身国际科技竞争核心领域
夯实工业互联网发展人才底座
2025年我国脑机接口产业发展成效显著
2025中国智能车未来挑战赛聚焦多智能体具身交互
科普博览 查看更多>>
我国发现新矿物 正式命名为金秀矿
中国科技“新特产”受外国游客追捧
大力发展未来产业 再造中国高技术产业
L3级自动驾驶车型获附条件准入许可,释放哪些信号?
让低空物流触手可及
墨西哥城举办马尼拉大帆船主题展
世界文化遗产元上都遗址重启考古发掘取得重要收获
我国出土金银器领域专项普查取得新成果
马德里街头的音乐巡游
“玉见文明:良渚文化特展”亮相上海
多彩民俗迎冬至
2025年全国中小学科学教育工作推进会暨全国中小学科学教育实验区、实验校建设工作会召开
南京铁道职业技术学院党委书记贺兴初:以产教融合深实践 育轨道交通高技能人才
教育部:2024年留学回国49.5万人 同比增长19.1%
教育思考:中小学如何构建人工智能课程
羽毛球世巡赛总决赛:石宇奇、王祉怡提前锁定四强名额
国际足联:美加墨世界杯冠军将获得5000万美元奖金
北京冬奥会开启了中国乃至全球冰雪运动新时代——专访国际奥委会终身名誉主席巴赫
2025中国金球奖候选名单揭晓
“无臂飞鱼”袁伟译:勇敢迈向“第二道坎”
海南自贸港封关启航,中免集团“十二重礼”激活消费新图景
冬日赛里木湖
前11个月全国铁路发送旅客42.8亿人次 创历史同期新高
重庆冷水镇:生态旅游助力乡村振兴
滇池:美景如画引客来