Word Copilot 给答案附了引用,怎样看出它有没有用对来源?
核对微软 Word Copilot 的引用功能和长文档摘要限制,附可复制的核查提示词,检查数字错配和内容遗漏。本文为官方文档核对,未进行账号内实测。
怎么判断?
Word Copilot 可以在文档问答中提供来源引用,也可以按要求给生成内容添加引用。引用是否正确,要回到原文检查它支持了哪句话,以及日期和适用条件是否一致。先用一份内容已知的短文档核对数字,再检查长文档后半部分;自动摘要目前仍可能缺少对靠后内容的引用。本文核对了微软帮助文档,下面的材料和操作是建议测试方法,未进行 Word 账号内实测。
先确认引用覆盖哪一种回答
在 Word 中打开要核对的文档,选择 Copilot 按钮,右侧聊天窗格可用于询问当前文档。微软的文档问答帮助页明确说明,回答后可以查看它从文档何处提取信息的引用。先问一个原文有明确答案的问题,例如某项方案的截止日期,再打开回复里的引用定位对应段落。
开放式提问还可能得到文档之外的回答。写作帮助页另外列出了添加引用功能,并说明可用体验受许可证、组织设置和应用版本影响。测试时把当前文档问答与外部资料生成分开,记录实际出现的引用类型;没有看到相应按钮时,先核对账号与版本,不把别人的操作截图当成自己已获得的功能。
用一份短材料查清数字有没有串行
可以新建一份专用测试文档,写两段虚构信息并明确标为测试:甲项目预算十二万元、六月三十日截止;乙项目预算八万元、七月十五日截止。接着输入:仅根据当前文档,分别列出两个项目的预算和截止日期,每个事实附引用;文档没有写的信息请标为未提供。这里的数字只是测试样例,不代表真实项目。
逐项比对回答里的项目名称,再查金额和日期。引用跳到甲项目段落,回答却写了乙项目的预算,即使链接可打开也应记为错误。把一句话中的多个事实拆开核对,更容易发现引用只支持日期、却没有支持金额的情况。下面这张表可直接用于记录同一次试验。
| 检查对象 | 核对动作 | 通过条件 |
|---|---|---|
| 项目与金额 | 打开引用,逐字对应项目名称和预算 | 名称与金额属于同一个项目 |
| 日期与条件 | 保留原文中的年份及附带限制 | 回答没有省略会改变意思的条件 |
| 原文未写的结论 | 检查是否被标为未提供或推断 | 没有用相近段落冒充直接依据 |
长文档后半部分需要单独复查
微软的自动摘要说明列出一个具体限制:Copilot 虽然会考虑整份文档,目前仍不总能对文档靠后的内容给出引用。不能据此断定后半部分没有被处理,也不能因为前几条引用正确就认定摘要完整。核对时,从靠后的章节另选一个已知事实,直接询问它并检查对应段落。
再把摘要与原文目录对照。如果最后一节写的是方案取消条件,摘要却只保留前面的实施计划,应补查取消条件是否遗漏。可以按章节分别生成摘要,再由读者核对合并结果。这个操作用于定位缺项,不能保证分章后就不会出错;最终文档仍要与原文逐条对应。
交付文档保留能让下一位读者复查的信息
正式交付的关键判断应附上所用资料的名称和版本,同时保留对应段落。自己的建议另起一句,交代成立所需的假设。如果材料本来是扫描图片,可先提取文字帮助查找,但 OCR 结果中的金额与日期仍应回看原图,避免把识别错误当成引用原文。
本次已核对三份微软官方帮助页,确认了文档问答引用、写作时添加引用及自动摘要的已知限制。尚未验证特定租户中功能是否已开放,也未测试真实长文档的引用正确率。实际试验应保存提示词和回复,再记录发现的错配;只有完成这些操作,才能在自己的报告中使用实测一词。
核对来源
以下链接支持文中的项目描述或事件事实。本站判断由编辑撰写,未把来源中的主张当作本站实测结论。