AI 入門基礎粉皮書
AI 入门基础
第二部分 看懂大模型07

幻觉、知识截止与多模态:边界的由来

入门20 分钟第 7 / 19 章

编造人名、不知道昨天的事、看图漏细节——三类最常翻车的场景,都能从生成机制本身推出来。理解了成因,就知道哪些能防、哪些只能绕。

学完本章你能做到

  • 解释幻觉为什么是生成机制的必然产物,而不是可以修复的 bug
  • 用知识截止日期解释模型对新事件的沉默与胡说
  • 描述多模态识图的能力来源与典型失误

学习与练习

从课程目录定位知识点,按章节完成练习,随时接着上次继续。

先停一下

幻觉:只能防,不能修

模型被问到一个不知道的问题时,机制上不会「停下来承认不知道」,而是继续执行它的唯一职责:预测一个最像答案的词。于是一段流畅、自信、内容虚构的回答诞生了——这就是幻觉。 关键认知:幻觉不是程序出错,是生成机制的副产品。指望「下一个版本修复」是不可能的,只能靠工程手段防御: 要求给出依据:让它标注每个论断来自输入材料的哪一段。 限定材料范围:「只根据以下资料回答,资料中没有就写『未提及』」。 人工核对关键事实:人名、数字、引用、金额,逐个回到来源验证。 防御做得好,幻觉率可以压到很低的实用水平;宣称归零的,要么不懂,要么在骗你。

先理解

知识截止日期:它不知道昨天发生了什么

模型的知识来自训练时的语料,语料有个终点——比如「训练数据截至某年某月」。那个日期之后的世界,模型默认一无所知。 表现为两种症状:对新事件沉默,或者更危险地,用旧知识自信地「脑补」。你问一个刚发布的产品,它可能一本正经地介绍一个并不存在的型号。 补救路径只有两条: 联网搜索:让产品在回答前先查最新信息; 把资料塞进上下文:把新闻、文档直接贴进对话。 判断口诀:涉及「最近」的一切信息,默认模型不知道,除非你把「最近」递给它。

看个例子

多模态:图片是怎么被读懂的

文本模型本来只认文字。让它们看图,是后来「加装」的能力:把图像转换成模型能处理的表示,再和文字一起送进去。 加装方式决定了看得多细。目前的普遍表现:看懂整体内容和布局没问题;读照片里的场景、图表的趋势也可靠;但密集小字、精确数字、复杂表格的单元格级精度,仍然时常出错。 实操守则:让模型看图可以,但凡是要抄录图中文字或数字的任务(发票、报表、截图数据),务必人工复核原图。多模态扩展了它的感官,没有免除你的验收。

给三个回答做体检

找一个 AI 助手,连续问三个问题,然后给每个回答标注风险类型。

  1. 1问一个它训练截止后的新事件,观察它是沉默还是编造
  2. 2问一个冷门事实(如某位小众学者的出生年份),追问「来源是什么」
  3. 3发一张含密集文字的截图让它转录,逐字核对

验收清单

  • 能为每个回答标注:可信、需核实、疑似幻觉
  • 能说出每个风险对应本章的哪个成因
  • 建立了「关键事实必核对」的习惯

小贴士把「资料中没有就写未提及」设成你的常用指令。一句话不能消灭幻觉,但能让大部分编造主动现形。

常见问题

为什么模型不直接回答「我不知道」?

因为训练目标就是「给出最合理的延续」,而不是「报告自己的无知」。有些新产品加入了「拒答」训练,效果在改善,但你不能假设它存在——防御性提示词和人工核对仍然是必需品。

学完后记得保存进度

完成標記保存在目前瀏覽器;登入後,會記住上次閱讀的章節與位置。