第二部分 看懂大模型07
幻觉、知识截止与多模态:边界的由来
入门20 分钟第 7 / 19 章
编造人名、不知道昨天的事、看图漏细节——三类最常翻车的场景,都能从生成机制本身推出来。理解了成因,就知道哪些能防、哪些只能绕。
学完本章你能做到
- 解释幻觉为什么是生成机制的必然产物,而不是可以修复的 bug
- 用知识截止日期解释模型对新事件的沉默与胡说
- 描述多模态识图的能力来源与典型失误
学习与练习
从课程目录定位知识点,按章节完成练习,随时接着上次继续。
先停一下
幻觉:只能防,不能修
模型被问到一个不知道的问题时,机制上不会「停下来承认不知道」,而是继续执行它的唯一职责:预测一个最像答案的词。于是一段流畅、自信、内容虚构的回答诞生了——这就是幻觉。
关键认知:幻觉不是程序出错,是生成机制的副产品。指望「下一个版本修复」是不可能的,只能靠工程手段防御:
要求给出依据:让它标注每个论断来自输入材料的哪一段。
限定材料范围:「只根据以下资料回答,资料中没有就写『未提及』」。
人工核对关键事实:人名、数字、引用、金额,逐个回到来源验证。
防御做得好,幻觉率可以压到很低的实用水平;宣称归零的,要么不懂,要么在骗你。
先理解
知识截止日期:它不知道昨天发生了什么
模型的知识来自训练时的语料,语料有个终点——比如「训练数据截至某年某月」。那个日期之后的世界,模型默认一无所知。
表现为两种症状:对新事件沉默,或者更危险地,用旧知识自信地「脑补」。你问一个刚发布的产品,它可能一本正经地介绍一个并不存在的型号。
补救路径只有两条:
联网搜索:让产品在回答前先查最新信息;
把资料塞进上下文:把新闻、文档直接贴进对话。
判断口诀:涉及「最近」的一切信息,默认模型不知道,除非你把「最近」递给它。
看个例子
多模态:图片是怎么被读懂的
文本模型本来只认文字。让它们看图,是后来「加装」的能力:把图像转换成模型能处理的表示,再和文字一起送进去。
加装方式决定了看得多细。目前的普遍表现:看懂整体内容和布局没问题;读照片里的场景、图表的趋势也可靠;但密集小字、精确数字、复杂表格的单元格级精度,仍然时常出错。
实操守则:让模型看图可以,但凡是要抄录图中文字或数字的任务(发票、报表、截图数据),务必人工复核原图。多模态扩展了它的感官,没有免除你的验收。
给三个回答做体检
找一个 AI 助手,连续问三个问题,然后给每个回答标注风险类型。
- 1问一个它训练截止后的新事件,观察它是沉默还是编造
- 2问一个冷门事实(如某位小众学者的出生年份),追问「来源是什么」
- 3发一张含密集文字的截图让它转录,逐字核对
验收清单
- 能为每个回答标注:可信、需核实、疑似幻觉
- 能说出每个风险对应本章的哪个成因
- 建立了「关键事实必核对」的习惯
小贴士把「资料中没有就写未提及」设成你的常用指令。一句话不能消灭幻觉,但能让大部分编造主动现形。
常见问题
为什么模型不直接回答「我不知道」?
因为训练目标就是「给出最合理的延续」,而不是「报告自己的无知」。有些新产品加入了「拒答」训练,效果在改善,但你不能假设它存在——防御性提示词和人工核对仍然是必需品。
学完后记得保存进度
完成标记保存在当前浏览器;登录后,会记住上次阅读的章节与位置。