有一种情况比"完全不收录"更让人困惑:搜索资源平台显示"已发现",但索引量几个月纹丝不动。页面不是没被抓,是抓了之后没被放进索引。这时候再去提交 sitemap、发外链,基本没用,因为问题出在"评估"环节。
一、先确认三个数据
别凭感觉判断,先看三处。
- 索引量曲线:是平的、缓慢下降,还是锯齿状波动。平移通常是内容评估问题,下降可能是站点质量或惩罚,锯齿多半是抓取不稳定。
- 抓取频次:如果频次很低(每天几十次),说明抓取预算不足,先解决服务器和结构问题。
- 抓取异常:看有没有大量 404、500、302 跳转。异常多会拖累整体评估。
二、方向一:抓取预算被浪费
蜘蛛每天能抓的页面数是有限的。如果它把预算花在了无意义的 URL 上,真正的内容就排不上队。
常见的浪费源:
- 筛选参数页(
?color=red&size=l组合出上千个 URL) - 分页过深(第 20 页之后的列表页)
- 标签页、搜索结果页、会员中心等功能页
- 重复的 www / 非 www、http / https 版本
处理办法:用 robots.txt 屏蔽参数页和功能页,用 canonical 收敛重复版本,把 sitemap 精简到只留真正想被收录的 URL。sitemap 塞几千条低质 URL,反而会拉低整体信任度。
三、方向二:内容评估没过
这是"已发现未索引"最常见的原因。谷歌和百度都会做质量评估,判断标准大同小异:
- 是否重复:和站内其他页面高度相似,或和网上已有内容重复。
- 是否有用:页面能不能独立解决一个问题。产品参数页如果只有五行字,很难被判为有用。
- 是否可信:有没有作者、联系方式、公司信息、引用来源。
- 是否过时:内容里的年份、价格、政策是否还是旧的。
验证方法很土但有效:把你的页面和搜索结果前三名逐段对比。如果前三名都讲了五个要点,你只讲了两个,那就是内容不足;如果你们讲的完全一样,那就是没有增量。
四、方向三:站点整体权重不足
新站或权重低的站,索引量增长本来就慢。这种情况下单页优化效果有限,要做的是提升整站:
- 把已有页面的内容做厚,尤其是首页和栏目页。
- 建立清晰的内链,让重要页面获得更多内部投票。
- 获取少量高质量外链,哪怕一年只有十条。
- 保持稳定更新,让蜘蛛形成抓取习惯。
这四件事做三个月,索引量通常会开始动。急着一次性提交几千个 URL,反而容易触发风控。
五、方向四:站点结构有问题
层级太深、导航缺失、大量孤岛页面,都会导致"发现了但不收"。检查方法:随便挑十个未收录的页面,看从首页点几次能到。超过三次,就要优化结构,比如加栏目聚合页、加相关推荐、加标签页。
六、一个 30 天的整改节奏
| 周次 | 动作 |
|---|---|
| 第 1 周 | 清理参数页与重复 URL,精简 sitemap |
| 第 2 周 | 补厚 10 个核心页面的内容 |
| 第 3 周 | 梳理内链,确保重要页面三次点击可达 |
| 第 4 周 | 观察索引量与抓取频次,记录变化 |
30 天不够就再来一轮,别中途换方向。索引恢复通常滞后于整改两到四周。
索引量不涨,先看这三处
抓取频次有没有变化、新页面有没有站内入口、内容是否和已有页面高度重复。三处里任何一处出问题,索引量都会停。
不要一上来就提交 sitemap。蜘蛛不来,提交多少次都没用;先把入口和抓取修好。
索引量下降时,先看掉的是不是标签页、搜索页这类低质页面。如果是,反而是好事。核心页面还在,就不用慌。
常见问题
主动推送能解决不释放吗
不能。推送只影响"发现",不影响"评估"。已经显示已发现的页面,再推也没用。
删掉低质页面有用吗
有用,但要谨慎。大量删除会让索引量短期下降,长期看能提升整站质量比。建议先 noindex 观察一个月,确认无流量再删。
要不要做站群互相引
不要。站群互引在现在的算法下很容易被识别,风险远大于收益。
索引恢复之后,接下来是排名。排名上不去的常见原因,见排名突然下降的分场景诊断。