网站规模扩大后,最先不适合继续手工做的,通常不是“写内容”本身,而是那些每次都要重复判断、重复记录、重复核对的工作:内链位置、批量标题与描述、死链与跳转、站点地图和索引状态巡检。保留手工的应该是判断标准、样本抽查和异常解释;一旦页面数量、栏目层级或更新频率超过一个人能稳定记住的范围,继续手工做这些事会同时带来遗漏和误判。
判断类工作值得保留手工,例如某个栏目是否该继续做、某类页面是否值得被索引、用户搜索意图是否与落地页一致。搬运类工作则相反:把同一批链接加到多个页面、把同一规则套到几百个标题上、逐条记录哪些 URL 已提交。搬运类工作一旦超过几十个对象,手工的出错率会明显上升,而且出错后很难回查是哪一步漏了。
一个可操作的区分方法是:如果这项工作每次都要重新看一遍页面内容才能决定,它偏判断;如果规则已经写清楚,只是执行次数多,它偏搬运。搬运类工作适合交给脚本、模板或站点后台的批量功能,判断类工作保留人工,但要用抽样验证批量结果。
这四类的共同点是:动作可重复、结果可核对、规则相对稳定。退出手工不等于放任,而是把人工放在规则制定和异常处理上。
有些站长会发现,批量处理后某些页面表现反而变差,于是判断“还是手工好”。这个结论不一定成立。批量处理变差通常有三种可区分的原因:一是规则本身把不该改的页面也改了;二是模板输出重复内容,导致页面之间缺少差异;三是改动同时触及了标题、内链和跳转,无法判断是哪一项造成影响。
要区分这些解释,可以留一组未改动的对照页面,只改一个变量,并记录改动前后的索引状态和着陆页表现。如果只有被批量改动的页面出现异常,而对照页面稳定,才更可能是规则问题;如果对照页面也同步变化,就要考虑抓取周期、内容更新或季节因素。请求量或抓取量下降本身不能单独证明批量处理错了,它也可能来自站点整体更新节奏变化或抓取预算重新分配。
保留手工适用于对象少、判断依赖上下文、错误代价高的场景,例如首页、核心栏目页、主要转化页的标题与结构。这类页面数量有限,手工调整后能直接观察下一步该改什么。
改写为半自动适用于规则清楚但需要人工兜底的场景,例如分类页描述、标签页聚合、分页标题。做法是先定义模板变量,再人工抽查最容易被搜索命中的页面,发现重复或错位就回到模板修改。
退出手工适用于结果可批量核对、规则不依赖单页语境的场景,例如站点地图生成、死链扫描、跳转清单、索引状态导出。退出后要保留一份可复查的输出记录,否则下次出现异常时无法判断是规则变了还是页面变了。
假设一个站点从 200 个页面扩到 2000 个页面,仍按原来的方式逐页加内链。三个月后可能发现,新页面获得了大量内链,旧页面几乎不再被链接。这个结果不能直接说明旧页面内容变差,更合理的解释是内链分配规则没有随规模更新。下一步应检查内链来源分布,而不是继续手工补链接。
把搬运类工作交出去之后,人工的重点应转向三件事:规则是否覆盖了不该覆盖的页面、批量输出是否产生重复、异常页面是否能被单独识别。可以固定一批样本 URL,每隔一段时间核对它们的索引状态、标题展示和着陆页一致性。样本里要同时包含核心页面、长尾页面和近期新增页面,否则容易只看到表现最好的那一部分。
如果样本显示批量规则误伤了某些页面,下一步不是全部退回手工,而是缩小规则范围,把例外页面单独列出。如果样本显示规则没有误伤,但整体表现没有变化,也不等于工作无效,可能只是抓取和索引尚未完成。把验证动作和判断标准分开,才能决定继续保留、改写还是退出某项手工工作。