现象
站点上线一年多,索引量稳定在 4000 左右。一次主题升级后两周内索引量清零,搜索资源平台显示「索引覆盖」为 0,全站 site 几乎查不到任何结果,但页面本身访问正常,速度也没有变慢。
原因
最常见的元凶是模板把 noindex 写死在了通用 head 里,改版时从演示模板带进来没删掉;其次是 robots.txt 整站禁止或响应头带了 X-Robots-Tag: noindex;也有站点因为大面积采集、违规内容被整站降权。三者都会让索引量归零,但排查方式完全不同,所以必须先用命令区分,不要一上来就大改模板。
解决步骤
第一步,检查页面级信号。抓一个内页,看响应头与源码里有没有禁止索引的标记。
curl -sI https://www.example.com/post/1.html | grep -i x-robots
curl -s https://www.example.com/post/1.html \
| grep -i 'name="robots"'
curl -s https://www.example.com/robots.txt
第二步,清理禁止项。删掉模板里硬编码的 noindex,把 robots.txt 里全站的 Disallow: / 改成只屏蔽后台路径,确认 Nginx 没有追加 X-Robots-Tag 头。
Disallow: /admin/
Disallow: /search?
Sitemap: https://www.example.com/sitemap.xml
第三步,重新提交并观察。在资源平台提交 sitemap 与首页,用抓取诊断确认返回 200 且可索引;若信号都正常仍不恢复,多半是降权问题,需从内容质量和外链入手,恢复周期以月计。
验证
抓取诊断显示「可索引」,两到四周内索引量从几十条回升到数百条,并持续增长到原有水平。
小结
索引清零先查 noindex 三处来源:模板、robots.txt、响应头。三个都排干净再提交抓取,若是降权则只能靠长期整改。
