网站从几十页扩到几千页后,最先撑不住的不是内容创意,而是那些每次都要人肉重复、且每次判断标准都靠记忆的工作。手工做不是错,错在规模变了,边际成本变了:同样一件事,在50页时花十分钟,在5000页时花掉的是一个月的排期。下面用一个明确假设的情境,把“哪些该交给规则和脚本、哪些仍需人判断”拆开。
以下为虚构情境,仅用于说明判断方法。某站点从约300页扩到约6000页,A负责内容,B负责技术,C负责运营。A认为“页面都上线了,抓取自然跟上”;B认为“日志里请求数没降,说明没问题”;C认为“收录数掉了,一定是内容质量差”。三人分歧的根源是:他们各自看的指标属于不同环节——抓取、索引、排名,而这三者不是一回事。
把分歧转成可核对项目的动作是:先确定“我们讨论的是哪个环节”,再决定这件事能不能手工做。抓取看服务器日志与站点结构;索引看页面是否被选中进入结果;排名看已索引页面在具体查询下的表现。混在一起争论,永远吵不出结论。
手工点链接在300页时可行,6000页时覆盖不了。可核对的做法是用爬虫跑一遍,输出状态码分布和内部链接深度。动作:先跑一次全量抓取,把返回异常和孤岛页面单独列出。结果如何影响下一步:如果异常集中在某几个模板,修模板比逐页改更省;如果分散在各处,说明需要的是发布前的自动校验,而不是事后清理。
标题和描述若按同一规则批量生成,手工改既慢又容易前后不一致。但要注意:批量生成不等于批量正确。先抽样核对一批页面的实际展示效果,再决定是调规则还是保留人工。动作:抽20到30个页面,人工判断批量结果是否可接受。结果:可接受则扩大规则覆盖,不可接受则说明规则本身有问题,继续手工只是掩盖问题。
每天手工查同一批页面的索引状态,属于典型的低判断、高重复工作。它适合用固定脚本定期取数、只在异常时提醒。动作:把“定期核对”改成“异常触发”。结果:人力从日常盯盘转向处理异常,而异常本身仍需要人判断原因。
当A说“收录”、B说“抓取”、C说“流量”时,手工同步口径会消耗大量沟通成本。动作:把每个指标的定义、数据来源、统计周期写成一页可核对的说明。结果:争论从“谁说得对”转为“我们看的是不是同一个数”。
内容选题、页面意图判断、以及“这个页面到底该不该存在”的决策,依赖对用户和业务的理解,脚本只能提供参考。手工做这些不是效率问题,而是判断权问题。可以自动化的部分是把候选、证据和影响范围整理好,把最终取舍留给人。
另一个容易误判的点:某项统计归零或请求量下降,不能单独证明处理正确。它也可能来自抓取预算转移、站点结构调整、或统计口径变化。要区分这些原因,需要同时看日志、索引状态和页面变更记录,而不是只看一个数字。
按这个顺序做,规模扩大后的重点不是“少用人”,而是把人的时间从重复核对转移到真正需要判断的地方。