本文目录8可以得到什么适合哪些情况需要准备什么常见做法真实案例与教程限制和检查点相关任务来源检查 AI 回答里的链接是否真的支持结论 可以得到什么 一份按事实陈述逐条标注的核验结果,标明每条结论是否被原始来源支持、属于哪类错误。 对"AI 给出的链接是否可信"形成可重复的判断,而不是凭印象。 一份可保存、可分享的核验记录,便于事后复核或与他人讨论。 适合哪些情况 AI 回答中带有看似正式的数字、年份、机构名、统计或法规条款。 用户要把这些内容用于消费决策、新闻判断、工作调研或学习引用。 用户想对一组 AI 回答做批量、统一的核验,而不是逐句凭感觉判断。 用户在面对"AI 给的资料要不要直接采用"的犹豫时刻,希望用一套具体动作代替"看起来对不对"。 需要准备什么 原始问题与 AI 回答的完整记录(方便拆解事实陈述) 可以正常打开外部链接的网络环境 一个简单的表格或笔记工具,用于登记每条引用是否支持表述、属于哪类错误 在医疗、法律、金融、公共安全等领域准备转给专业人员或权威机构复核的意识 常见做法 把回答中的每一句结论拆成可单独判断的事实陈述。 对每条事实要求模型给出对应链接,但不把"出现链接"当成核验完成。 逐条打开链接,检查页面是否存在、是否为原始来源。 在打开的页面中定位与回答相对应的证据。 判断证据是否完整支持表述,记录错误类型:无中生有、张冠李戴、时间混乱、以全概偏 / 以偏概全、计算错误等。 涉及高风险领域的结论继续交给专业人员或权威机构复核。 真实案例与教程 案例:复数实验室 五款模型 400 次提问与 3123 次引用核验案例 — 复旦课程团队对 5 款主流模型做 400 次提问、3123 次引用的人工核验,得到 45.37% 不能完整支持的结论。 方法:AI 引用是否真正支持表述的核验流程(拆事实 → 打开链接 → 定位原文 → 判断支持关系) — 把上述流程整理为可复用步骤。 来源:SRC-LIFE-006:实测数据告诉你:带引用的 AI 也不可靠 限制和检查点 实验数据显示,开启深度思考 / 推理模式未必降低引用错误,不要把"AI 想得更久"误读为"更可信"。 45.37% 这个数字只适用于那次实验的样本与时段,不能外推到所有模型、所有任务、所有领域。 高风险领域(医疗、法律、金融、公共安全)仍须由专业人员或权威机构复核。 模型版本、网页内容会持续变化,所有引用都应以当前模型、当前来源、当前日期重新核验。 相关任务 用 AI 搜索理解一项生活政策 — 用 AI 搜索理解一项生活政策(同样需要核验) 用自然语言、OCR 与全文检索找回个人或家庭资料 — 用自然语言、OCR 与全文检索找回个人或家庭资料 来源 SRC-LIFE-006:实测数据告诉你:带引用的 AI 也不可靠