为什么聊天机器人对同一个问题会给出不同的回答?

聊天机器人对同一问题给出不同答案,是因为它在生成每次回复时,都会从可能出现的下一个词中进行选择,而这个选择过程通常带有一定的随机性。它并不是在检索某个已存储的答案。

设想一家虚构的建筑设计事务所“费尔莱恩建筑”,有 30 名员工。一位合伙人要求办公室经理罗恩在事务所采用 AI 助手前解释三件事。罗恩的笔记写着:'两次问它有关获准开发的规定,得到两个不同答案';'它引用了一个根本不存在的规划指导文件编号';'图像工具画的新工作室草图很好看,但窗户没有对齐'。合伙人想知道工具是不是坏了。并没有。它的表现完全符合其设计方式。

生成式 AI 模型是如何训练的?

大语言模型首先通过海量文本训练,学习预测接下来的文本内容,然后通过进一步训练来学习遵循指令并给出有帮助的回答。Anthropic 的术语表将预训练描述为:在大规模未标注语料上,根据前文预测下一个词;之后再进行微调和基于人类反馈的强化学习,由人对示例回答进行排序,让模型学会优先给出更好的回答。

模型并不会保留每份文档的副本。它会调整内部数十亿个数值,直到预测结果符合数据中的规律。最终形成的更像是对语言和概念通常如何组合的细致把握,而不是一个可供搜索的资料库。

什么是词元,模型如何预测词元?

词元是模型读取和生成文本的基本小单位,通常是一个词或词的一部分。模型通过反复预测下一个可能的词元来生成文本。Google 的机器学习课程将语言模型描述为:估算某个词元或词元序列出现在更长序列中的概率,并指出大约 400 个词元相当于约 300 个英文单词。

每一步,模型都会为许多可能的下一个词元评分。随后,应用会选出一个词元:有时选择最可能的那个,但通常会从可能性较高的选项中抽样选择。一个称为“温度”的设置控制这种选择有多大胆:数值越高,措辞越多样;数值越低,措辞越可预测。Anthropic 指出,即使温度设为最低,结果也并非完全确定。这就回答了罗文的第一条备注。

AI 图像生成工具的工作原理是什么?

许多 AI 图像生成器使用一种称为扩散的方法:模型先学习去除图像中的噪声,然后在你的文字描述引导下,从随机噪声出发逐步细化,生成新图像。Hugging Face 的扩散课程这样描述训练过程:添加不同程度的噪声,并教模型修复图像;而生成过程则是逐步细化随机噪声,直到图像成形。

因为模型是在生成看似合理的像素,而不是遵照建筑师的图纸,所以窗户是否对齐、标牌上的文字或手指数量等细节都可能出错。这是罗文的第三条备注。

这对你使用这些工具的方式意味着什么?

这意味着,你应该向工具提供希望它据以处理的事实,而不是依赖它的记忆。较差的提示词:'房屋后侧扩建适用哪些许可开发规则?' 答案虽然流畅,但每次尝试的结果可能不同,还可能混用不同年份或国家的规则,甚至引用看似可信却虚构的文件。这也解释了罗文的第二条备注。

改进后的提示词:罗文粘贴了官方规划指南中的相关段落,并提问:'仅根据下方文本,用表格总结单层后部扩建的尺寸限制。如果文本没有涉及某项内容,就注明未涉及。'现在,模型只需复述和整理眼前的文本,这是它擅长的任务,而罗文也能逐行对照原文核查。

生成式 AI 有哪些局限?

生成式 AI 的主要局限包括:可能自信地陈述错误信息;除非接入搜索或文档,否则其知识存在截止时间;只能处理上下文窗口容纳得下的内容;以及可能反映训练数据中的偏见。这些都不是把话问得更客气就能修复的故障,而是模型工作方式带来的局限。

对照可信来源核实事实、数字、姓名和参考资料;只要准确性很重要,就向工具提供原始资料。

这节课在 Tosheo.ai 课程体系中属于哪一部分?

“生成式 AI 的工作原理”属于“AI 基础”类别,是 AI 入门学习的前期课程之一,也是生成式 AI 课程的第一课。在 Tosheo.ai 上,实操任务要求你先预测再测试:调整类似温度参数的设置或提供源文本后,工具的表现会如何变化。评分标准对应的反馈会检查你的解释能否让同事理解。

来源与范围

Google 开发者资源,机器学习速成课程,大语言模型与词元简介(核查于 19 October 2026) ↗

Anthropic Claude 文档,术语表:预训练、基于人类反馈的强化学习、温度参数和词元(核查日期:19 October 2026) ↗

Hugging Face 扩散模型课程,第 1 单元:扩散模型入门(核查日期:2026 年 10 月 19 日) ↗

何、贾因和阿比尔,《去噪扩散概率模型》,arXiv 2020(核查日期:19 October 2026) ↗