企业需要快速读完的,往往不是一篇文章,而是一组彼此重复、时间不同、口径不一的材料。将它们合成流畅结论,最容易消失的可能正是决策需要看到的例外与分歧。本文讨论长期有效的验收方法,不把历史摘要研究当作当前产品的性能证明;所有业务案例均为构造示例。
从缩短阅读时间,到替读者选择证据
单篇摘要主要面对一份文本的压缩;多文档摘要还必须处理来源关系。同一个数字可能在原报告、部门简报和转发邮件中出现三次,也可能分别对应计划、预测和实绩。如果系统只按出现频率挑选要点,重复传播的说法会获得不应有的权重。
对技术负责人而言,关键变化是交付物被用于什么决策。供个人浏览的摘要可以只是入口;用于供应商评审、项目复盘或资源分配的摘要,则承担了选择哪些证据进入讨论的责任。即使每句话都能在某份文件里找到,仍可能漏掉足以改变结论的另一份文件。
既有的会议纪要与行动证据验收讨论了发言归属及承诺状态。本专题进一步处理跨文件的来源依赖、版本冲突和必需信息覆盖:谁说过某件事,与多份材料能否共同支持一个结论,是不同问题。
事实忠实、内容覆盖和现实正确性要分别判断
SummEval 将摘要评价分为一致性、相关性、流畅性和连贯性等维度;其研究对象主要是新闻摘要。[1] FRANK 又把事实错误细分,包含实体、关系及语篇连接等类型。[2] 这些研究支持多维检查的思路,却不能直接给出企业中文多文档摘要的放行分数。
忠实度检查问的是:摘要的说法是否被输入材料支持,是否改变了主体、条件或时间关系。覆盖检查问的是:读者完成当前决策所需的信息是否保留。现实正确性则需要材料之外的业务证据。忠实转述一份错误报告,仍不等于报告内容真实。
因此建议把交付拆为三部分:简明结论、支撑结论的来源定位、未解决的分歧及缺项。不是每份文件都必须被引用,也不是篇幅越长越完整;完整性应相对于预先确定的读者问题判断。若没有定义用途,团队往往只能争论摘要是否“像样”。
先建来源清单,避免把转述当成独立佐证
在生成之前,为每份材料登记稳定编号、修订号、业务生效时间、获取时间、发布责任方和原始来源。获取时间只说明何时拿到文件,不代表其中事实更新。对扫描件还要记录抽取是否完整;缺页、表格丢列和附件未读到应进入输入缺项,不能被摘要隐藏。
将直接记录、解释性分析和转述副本分开。两份简报都摘自同一个生产日报时,可以保留其不同分析,但不能据此宣布有三个独立来源证实产量。来源依赖无法判断时标为未知,不根据不同文件名或不同发送人推断独立性。
版本处理也不能简单“最后上传者胜出”。同一制度的正式修订可以替代旧版适用条款;两个部门对同一时点的不同预测则应并列。先确认对象、期间、单位、定义及适用状态,再判断是更新、互补还是冲突。无法裁定的差异应交给有责任的业务角色。
一组供应商材料,为什么不应被压成一个数字
构造一个采购评审场景。材料 A 是供应商周一提交的计划,写明周五可交付一千件;B 是采购周二简报,转述 A 的数字;C 是周三质量记录,说明其中三百件仍待复检;D 是物流估算,假定全部放行后两天送达。假设四份材料针对同一订单,尚无最终放行记录。
错误摘要可能写成“多方确认周五交付一千件,两天到货”。它混淆了计划与承诺,把 B 当成独立确认,也让 D 的条件消失。更合适的表达是:供应商计划周五交付一千件,采购简报转述该计划;质量记录显示三百件待复检;两天运输估算以放行为前提,实际可交付量和到货日期尚待确认。
先定义四个必需问题:计划数量及时间是什么,当前质量状态是什么,可交付数量是否已确认,运输估算依赖什么条件。对应证据分别指向 A、C、缺失的放行记录和 D;B 留在来源关系中。这里没有把一千减三百就断言七百件可发,因为剩余部分是否具备其他放行条件仍未知。
若又收到 E,声称已经全部放行,系统应展示 E 的责任方、对象范围及生效时间,并检查它是否正式更新 C。不能把两句话平均成“基本放行”,也不能仅因 E 更新就删除冲突痕迹。正式决策应记录由谁依据什么证据完成裁定。
用问题覆盖表验收,而不是只抽查生成句子
QuestEval 采用问答方式,从摘要与来源两个方向考察内容,并纳入重要信息选择。[3] 企业可以借鉴双向检查,但本文提出的必需问题表是人工定义的业务验收方法,不等同于复现该论文算法,也不继承其实验效果。
先由业务人员在不看候选摘要的情况下列出必需问题、允许的回答状态和证据。回答可以是已确认、存在分歧或材料不足;未知本身可能就是必须保留的信息。然后检查摘要中的每项结论是否有依据,再检查每个必需问题是否被正确呈现,防止只挑系统已经答出的内容评分。
构造一个验收例子:一组材料有八个必需问题,摘要对七个呈现正确,漏掉一个关键未决条件。按问题计数的覆盖率为七除以八,即 87.5%,但这不能自动成为通过结果。若预先规定该条件属于关键项,仍应退回。分母、关键项名单和裁定标准必须先冻结,不能看到结果再调权重。
应加入重复材料、相反结论、旧版置后、条件藏在附件、同名不同订单、无明确答案等测试组。重复加入同一转述,不应让结论变得更确定;改变材料排列,不应改变已确认的对象关系。出现变化时记录差异并复核,不把一次通过当成普遍保证。
决定何时用摘要,何时保留证据表
当材料同源、版本稳定、问题简单且后果可逆时,短摘要加来源入口通常足够。多方意见不同或结论尚待确认时,证据对照表比强求一段统一叙述更有价值。涉及关键批准、对外承诺或材料严重缺失时,应回到原文及业务核实流程;更长的摘要不能代替缺少的证据。
比较方案时保持相同任务与验收条件,计入整理来源、检查覆盖、解决分歧和发布更正的人工时间。若生成很快但审核者必须重新读完所有文件,收益可能主要是导航和定位,而不是替代阅读。可以把产品目标改成证据定位、问题清单或差异提示,避免为追求自动化比例牺牲可核对性。
实施从一种固定材料包开始:冻结输入清单和版本,生成摘要与分歧表,独立复核关键问题,记录退回原因和完整工时。材料更新后重新标记受影响结论,不悄悄沿用旧摘要。企业采购或验收应要求能展示这些记录,而不是只看一份没有争议材料的演示。
多文档摘要的专业价值,在于压缩重复表达,同时保留读者需要知道的差异。让未确认的结论继续保持未确认,让重复的转述回到同一个来源,让关键缺项有明确出口,才有条件把阅读提速转化为可靠的决策支持。
