抓取、索引和排名是三个先后不同、失败表现也不同的环节。要区分它们,最直接的方法是看页面在搜索中的具体表现:搜完整标题找不到、搜站点名也找不到、搜品牌词能找到但目标词找不到,分别指向不同环节。权重影响因素只在这个链条中起作用,不能替代对环节的判断。
不要一发现流量下降就认定是排名问题。按下面三类现象先做初判:
site: 查询或直接搜索完整标题、完整URL,结果中没有该页面;页面可能被抓取但未被收录,或被判为重复、低质而不进入索引。这三类现象可以同时出现,但判断顺序应从抓取到索引再到排名,前一步不通,后一步无从谈起。
把猜测变成可验证的结论,需要几个具体动作:
noindex、canonical指向其他URL、robots.txt屏蔽、需要登录才能看到正文。这些是索引失败的常见原因。判断结果的含义:搜标题无结果且日志无抓取,处理抓取;搜标题无结果但日志有抓取,处理索引;搜标题有结果但目标词无排名,处理排名与权重。
抓取索引问题和排名问题需要不同的处理方案,选错方向会浪费大量时间。
方案一:修复抓取与索引。适用条件是页面搜不到、日志无抓取或返回异常、存在屏蔽指令。处理动作包括:确认robots.txt未误封、移除不必要的noindex、修正canonical、让重要内容无需登录即可访问、提交站点地图。判断是否见效,看日志中抓取是否恢复、搜索完整标题是否能找到页面。这一方案不涉及权重积累,先把门打开。
方案二:改善排名与权重。适用条件是页面已能被搜到,但目标词排名不理想。处理动作包括:补充该词对应的内容模块、增加站内相关页面的内链、获取同主题页面的外部链接、提升页面加载与可读性。判断是否见效,看目标词位置是否移动、展现与点击是否变化。这一方案见效周期通常更长,且受竞争环境影响。
两种方案的先后关系是:索引未通过时先做方案一,索引通过后再做方案二。若同时存在抓取异常和排名落后,先解决抓取索引,否则排名优化没有载体。
处理之后需要复查,避免把索引恢复误判为排名提升。建议固定以下检查项:
复查的结论只有三种:仍卡在抓取、已进入索引但排名未动、索引与排名均有变化。按结论回到对应方案继续处理,不要跳过环节直接堆外链或改标题。
下一步:挑一个当前表现异常的页面,先搜完整标题并在日志中查它的抓取记录,确定它卡在抓取、索引还是排名,再按对应方案处理。