判断标准不是“手工能不能做”,而是这项工作是否依赖逐页判断、是否随页面数量线性增加、以及一次失误是否会扩散到整站。当页面从几十个增长到数千个,内链维护、批量元数据修改、结构化数据校验、失效链接处理和索引状态巡检,通常最先从手工操作转为规则化处理。手工仍适合处理高价值模板、核心栏目和争议页面,但不适合承担全站一致性任务。
假设你手里有一个产品列表页模板,原来只有三十个分类页,手工调整标题和描述完全可行。页面扩展到八百个分类页后,如果继续逐页修改,常见结果是:越勤快更新,站内标题重复率反而越高,部分页面被抓取后长期不更新索引。这个现象不能单独证明“手工方式错了”,也可能是模板输出逻辑有问题、分页参数被大量抓取、或内容本身差异过小。要区分解释,先取一批页面做对照:同一模板下随机选二十页,记录标题、描述、正文首段、内链入口数量和最近一次内容变更时间,再与索引状态放在一起看。
判断一项工作是否该转为规则化处理,可以看三个条件:是否需要逐页做语义判断;是否每新增一批页面就重复一次;是否一旦漏做就会影响整类页面。满足其中两个以上,手工方式通常不再经济。
假设你手上的资料是一份分类页清单,字段包括 URL、分类名、上级分类、关联产品数、最近更新时间。不要直接开始逐页改标题。先做四步:
这个动作的结果会影响下一步:如果抽样页面标题唯一性提高但索引状态没有变化,说明问题可能不在标题,而在内容差异度、内链入口或抓取预算分配;如果唯一性没有提高,说明字段规则本身不成立,应停止批量修改。
规则化处理不等于全部交给脚本。以下工作仍适合人工判断:核心栏目和首页的链接布局;高流量或高转化页面的标题与描述定稿;涉及品牌、法律、价格等敏感信息的页面;规则输出后出现语义偏差的抽样页面。手工的价值在于处理例外和争议,而不是承担全站重复劳动。
可以用一个简单假设来比较:同样八百个分类页,方案 A 全部手工修改,方案 B 先定义字段规则并抽样验收。方案 A 的优点是每页都能单独判断,缺点是耗时随页面数增加,且一致性依赖执行人;方案 B 的优点是覆盖快、可复检,缺点是规则可能误伤少数页面。选择哪一个,取决于页面之间的差异是否足够大、模板是否稳定、以及你是否有能力维护规则。若页面差异主要来自真实内容,规则化更可行;若每个页面都需要独立语义判断,手工或半手工更合适。
抓取量下降、索引量归零或某组页面排名波动,都不能单独证明手工或规则化处理正确。抓取量下降还可能来自服务器响应、站点结构调整、外部链接变化或抓取需求本身减少;索引量归零还可能是统计口径变化或查询方式变化。更稳妥的做法是保留处理前后的分组对照,记录页面类型、内容变更、内链变化和抓取状态,再判断变化是否集中在被处理组。只有对照成立,下一步才值得扩大处理范围。