怎么减少AI胡说八道?

怎么减少AI胡说八道?
收藏者
0
被浏览
888

3 个回答

bjc4845 LV

发表于 昨天 23:29

AI胡说八道,通常叫“幻觉”。意思是它不知道自己不知道,却还能说得特别流畅、特别肯定。想减少这种情况,核心就一句话:别让它闭卷吹牛,要让它开卷考试、查资料、承认不会,最后还有人把关。

对普通使用者来说,可以这样做:

1. 把问题问窄。  
不要问“给我讲讲这个行业”,而是问“根据2024年之后的中国法律,帮我列出三条……”。时间、地点、范围越清楚,AI越不容易乱编。

2. 先给资料,再让它回答。  
比如把一篇文章、一份合同、一段数据贴给它,然后说:“只根据我给你的内容回答,不要用你自己的记忆补充。”这样它就不容易跑到外面胡说。

3. 要求它标出处。  
你可以说:“每句话都告诉我来自哪一段,找不到依据就说不知道。”它一旦要交来源,就会收敛很多。

4. 允许它说“不知道”。  
可以明确要求:“如果信息不足,先向我提问,不要硬答。”很多胡说,都是因为AI觉得必须给答案。

5. 换种方式多问几遍。  
同一个问题,换个说法再问一次,或者让另一个AI也答一遍。如果答案差很多,就要警惕。

6. 关键信息一定自己查。  
医疗、法律、金融、政策、数字、日期这些内容,不要让AI单独决定。它说得越具体,越要查权威来源。

对做AI产品的人来说,可以减少胡说的办法有:

1. 让它先检索,再回答。  
也就是从数据库、网页、文档里找依据,然后基于依据说话,而不是全靠模型记忆。

2. 给它工具。  
计算器、搜索引擎、数据库、代码运行器,该用就用。能算的就别让它猜,能查的就别让它编。

3. 降低随机性。  
把“温度”调低,限制回答范围,系统提示里写清楚:“没有依据时,必须说不知道。”

4. 训练它重视依据。  
奖励有来源、有逻辑的回答,惩罚瞎编。还要专门训练它拒答、反问、承认不确定。

5. 加人工审核和反馈。  
高风险场景不能全自动。让人抽查、纠错,再把错误反馈回去,模型才会慢慢变稳。

总结一下:减少AI胡说八道,不是靠一句“你要准确”就解决。要靠限制范围、提供资料、要求引用、允许拒答、外部查证、工具辅助和人工把关。让AI从“闭卷吹牛”变成“开卷考试,带计算器,允许交白卷,还有人复查”,胡说就会少很多。

elber25977 LV

发表于 昨天 22:14

减少 AI 胡说八道,没有单一开关。关键是:减少它凭记忆猜,增加它基于可验证信息回答,并允许它说“不知道”。

对普通用户:
1. 给足上下文和资料。把原文、数据、条款贴给它,要求“只根据这些内容回答”。
2. 明确允许弃权。加上“没有依据时直接说不知道,不要编造”。
3. 要求引用来源。让它标出链接、页码、原文句子或数据出处。
4. 追问证据。问“这个结论依据是什么?原文在哪?有没有反例?”
5. 分步验证。先让它列事实,再推理,再检查前后矛盾。
6. 交叉验证。用另一个模型、搜索引擎或人工核对关键信息。
7. 降低发挥。要求“简洁、只答问题、不要补充未经要求的信息”。

对开发者:
1. 使用检索增强生成,也就是先检索可信资料,再让模型生成。
2. 接入搜索、数据库、计算器、代码执行等工具,减少凭记忆编造。
3. 在训练和对齐中奖励有依据的回答与“不知道”,惩罚无依据断言。
4. 调整解码参数,如降低 temperature、topp,减少随机发挥。
5. 加入引用机制、事实核查、自检和多模型投票。
6. 建立幻觉评测集,持续测准确率、引用正确率和拒答率。
7. 高风险场景保留人工审核,并明确标注不确定性。

一个实用提示词:
“请只根据我提供的材料回答。每个结论都要标注来源。材料中没有的信息,请说‘材料未提及’。不要猜测,不要补全。”

核心原则是:可验证、可追溯、可拒答、可人工复核。这样能显著减少 AI 胡说八道,但不能完全消除。

您需要登录后才可以回帖 登录 | 立即注册