核心做法是把“自动评分”降级为线索筛选器,而不是最终裁决者:先用它缩小范围,再用可复核的证据决定哪些项目进入人工判断。下面用一个假设情境说明具体取舍。
假设你负责维护一批站点,用 site 命令查询后把结果导入一个内部评分脚本,脚本按“结果条数”“标题重复度”“目录层级”打分,低于阈值就标为低优先。某天一个你熟悉的栏目被判为低优先,但直觉认为它不该被忽略。这时不要直接推翻评分,也不要直接相信评分,而是先问:这个分数到底在衡量什么。
如果评分输入只有结果条数,那么它衡量的是“可见条目规模”,不是“内容是否值得处理”。结果条数少可能因为该栏目本身体量小,也可能因为查询方式没有覆盖到它。两种解释对应完全不同的下一步动作。
要防止自动评分替代人工判断,先区分它输出的是覆盖信号还是质量信号。
自动评分通常只能稳定处理覆盖信号,质量信号往往被简化成规则,例如“标题重复即扣分”。规则一旦写死,就会把“同系列页面标题相近”误判为重复。因此人工判断的介入点,不是重新算一遍总分,而是检查评分把哪类信号当成了质量信号。
假设评分把某栏目判为低优先,你从该栏目的查询结果里抽取三条:一条排名靠前、一条居中、一条靠后。逐条记录三件事:页面能否正常打开、标题与正文主题是否一致、是否存在明显重复。
结果会直接改变下一步:
这个动作的价值在于:它不改变评分本身,却能让评分输出从结论变成待验证的线索。
自动评分可以承担更多判断,需要同时满足两个条件:评分依据的字段能从查询结果中稳定获得,且这些字段与最终处理动作之间有明确对应关系。例如“页面是否返回正常状态”可以直接决定“是否进入修复队列”,这种对应关系清晰,自动处理风险低。
反之,如果评分依据的是“看起来是否重要”这类需要语境判断的字段,就不适合让它单独决定去留。此时更稳妥的分工是:自动评分负责排序和分组,人工负责在每个分组内确认是否处理、按什么顺序处理。
在流程里加一个检查点即可:任何自动评分输出在进入执行前,必须能回答“这个分数由哪几个可核对字段算出”。如果答不上来,就退回人工判断。这个检查点不需要复杂工具,只需要在评分结果旁保留原始查询条目,让复核者能回到具体页面。
需要说明的是,结果条数下降或某项统计归零,并不能单独证明处理正确。查询方式变化、页面改版、索引更新节奏都可能造成同样现象。因此判断时应同时保留至少一种独立证据,例如直接访问页面或核对站点地图,而不是只看评分变化。
具体到不同工具的按钮位置、当前功能和数据规模,需要以实际界面为准,本文不对此作断言。把自动评分当作筛选器、把人工判断留给需要语境的决策,是防止替代的稳定做法。