塔斯娱乐资讯网

AI 一句话,战舰差点出动?这起「幻觉情报」事件,给所有人敲了警钟 你有没有遇

AI 一句话,战舰差点出动?这起「幻觉情报」事件,给所有人敲了警钟

你有没有遇到过这种事:问 AI 一个问题,它一本正经给你编了个答案,出处、数据、人名样样齐全,结果一查全是假的。
你顶多在群里被笑话一下。但如果这份答案是递到一支舰队桌上的呢?

一、事件:一份「AI 写的情报」,差点变成一次行动
据多家外媒报道,在一次军事行动中,情报链条里混入了一份由 AI 生成、却没有经过严格核实的报告。麻烦的是,这份报告从头到尾没有标注任何「AI 生成、待核实」的提示,于是一路被当成可信情报使用,险些触发拦截行动。直到事后复盘,人们才发现:报告里那些关键信息,是大模型「幻觉」编出来的。

二、AI 幻觉为什么防不住?
1. 它不是「查资料」,是在「接下一句」。大模型的本质是预测下一个字,流畅从来不等于真实。
2. 越「专业」越唬人。格式工整、术语齐全、语气笃定,恰恰最容易骗过急着看结论的人。
3. 链条越长越危险。情报、审核、决策层层传递,每一层都默认上一层已经核实过了。

三、三个真相,普通人也躲不开
· 真相一:AI 出错不会脸红。它很少说「我不确定」,只会给你一个看起来更完整的答案。
· 真相二:人是最后一道防线,也是唯一一道。机器跑得越快,越需要有人敢按下暂停键。
· 真相三:真正的风险不是 AI 变聪明了,而是我们太放心了。

四、怎么用才安全?三条能落地的建议
1. 关键结论必须「双源交叉」:任何单一的 AI 输出,都不作为最终依据。
2. 强制标注:凡 AI 生成的内容,在流转前必须打上「AI 生成·待核实」的标签。
3. 高风险场景保留人工复核环节,尤其是涉及钱、安全和对外发布的环节。

结语
AI 是效率的放大器,也是错误的放大器。同一份报告,用对了是参谋,用错了就是误报的导火索。技术不会自己长出敬畏心,那得靠用它的人。

你平时会核实 AI 给的答案吗?有没有被「一本正经胡说八道」坑过的经历?评论区聊聊。