陆零云
26
0
Search Console 的抓取统计里,30 天抓取 12.4 万次,已编入索引只有 1.6 万条。站点总共 2.1 万条 URL,等于每三条被抓的页面里只有一条进了索引。这个比例我盯了两周。
第一反应是内容不够,于是给 800 篇旧文各补了 300 字,又重推了一遍 sitemap。两周后抓取涨到 13.8 万次,索引只多了 400 条,补的字基本没起作用。
回头翻 Nginx 日志,按目录前缀聚合,问题很清楚:63% 的蜘蛛请求打在 /date/2...
陆零云
45
0
现象
站点上线一年多,索引量稳定在 4000 左右。一次主题升级后两周内索引量清零,搜索资源平台显示「索引覆盖」为 0,全站 site 几乎查不到任何结果,但页面本身访问正常,速度也没有变慢。
原因
最常见的元凶是模板把 noindex 写死在了通用 head 里,改版时从演示模板带进来没删掉;其次是 robots.txt 整站禁止或响应头带了 X-Robots-Tag: noindex;也有站点因为大面积采集、违规内容被整站降权。三者都会让索引量归零,但...