文档问答最容易出现的假象是:演示时问几个问题都答得不错,真上线后同事问一个具体条款,答案里混着两个已废止的旧版本。模型没有说谎,它只是把库里所有相关内容一起端了出来。

企业文档问答:知识库先清一遍,再上线

一、先给文档分级,再谈检索 实用的分法是三级:生效中(可以据此执行)、参考(历史方案,仅供了解)、废止(明确不可引用)。分级不需要多智能,需要有人负责签字确认。没有这个动作,任何问答系统都只能做到"看起来靠谱"。

二、一个主题只留一个权威版本 同一件事(报销标准、休假规则、对外报价口径)在库里有多个版本,是最常见的失分点。处理方式很土:为每个主题指定唯一权威文档,其余版本迁入归档区并在标题上加"历史"。这一步做完,回答的准确性提升往往比换模型更明显。

三、答案必须带出处,且能点开 每条回答后面挂文档名、章节、更新日期,点击可直达原文。这不仅是可信度问题,也是维护机制:没人点的引用说明那份文档可能已经没人用了。

【留个真问题】当 AI 的回答和制度原文冲突时,你的同事会相信哪一个?如果答案是"AI 的",那问题已经不在工具上了。

四、把答不上来的问题收集起来 上线第一个月,最有价值的产出不是答对率,而是"答不上来的问题清单"。它们通常指向三类缺口:库里没有这份文档、有但版本过期、有但表述和同事的实际问法差太远。按这个清单补库,比反复调整提示词有效得多。

五、敏感范围不要进同一池子 合同、薪酬、法务意见这类文档,进库前先定可问人群;不要把全公司文档灌进一个不分权限的问答入口,否则出现的不是效率问题,而是责任问题。

六、维护要有节奏,也要有人 清库不是一次性工程。设一个固定节奏——比如每季度一次,指定一位负责人对"生效中"清单签字确认,其余到期文档自动转入归档。没有指定责任人的知识库,三个月后就会重新长出三个版本的同一份制度,然后一切回到原点。

知识库不是越多越好,是越准越好。清理文档这件脏活,决定了问答能走多远。