陆零云
24
0
GSC 里「已编入索引」这一栏,周一还是 3,200,周三变成 0。抓取统计也是 0 次,sitemap 状态却显示成功。第一反应是被人工处理,或者 robots.txt 被人改了。
先把 robots.txt 拉下来逐行看,没有 Disallow。又用 curl -I 打了首页和内页,都是 200,X-Robots-Tag 也没多出来。站内搜索能搜到,说明页面没被删。问题只能在验证层。
翻资源列表才发现,当初验证的是「网址前缀」https://www.i...
陆零云
29
0
站点 8,400 条 URL,拆成 3 个子 sitemap,用 sitemap_index.xml 挂起来。GSC 里已提交的网址一直显示 2,400,正好是第一个子文件的条数。
先怀疑索引文件格式。curl 看 Content-Type 是 application/xml,没有 BOM,编码也对。用 xmllint 校验,报 parser error: EntityRef: expecting ';',行号指到第二个子文件里一个商品名带 & 的...
陆零云
24
0
「宝塔面板 502」这个词,页面排在第 2 有八个月,某天早上变成第 14。收录 8,600 条没变,抓取正常,站点也没改版。第一反应是被降权,翻了手动操作和安全性问题,两边都是空的。
接着怀疑内容过时,给那篇补了 600 字,标题也改了,把关键词往前挪。两周后排名掉到 19,比不动更糟。改标题会重置一部分信号,这个代价当时没算进去。
回头看搜索结果页才找到线索:前十条里有三条是视频,两条是问答,还有一个官方文档。八个月前这些位置只有普通网页。版式变了,网...
陆零云
28
0
站点 1.2 万条 URL,GSC 的编入索引报告里「已抓取 - 尚未编入索引」从 600 条涨到 3,900 条,占了三成。这批 URL 最近一次抓取都在 48 小时内,蜘蛛确实进来过,页面却被留在队列外面。
第一反应是内容太薄,把前 200 条的 description 和首段都重写了一遍,加了两段实测数据。两周后回看,这 200 条状态一点没变,改动对队列位置没有影响。
后来才把两种情况拆开看。一种是排队,站点短期被抓太多,索引线程排不过来;另一种是...
陆零云
27
0
GSC 的「软 404」报告里躺着 1,340 条,全是已下架的商品。点开任意一条,页面显示「商品不存在」,HTTP 状态却是 200。站内 6,800 条 URL,等于五分之一是空壳还留在索引里。
原因在框架的兜底逻辑:控制器查不到记录时不抛异常,直接 render 一个提示模板,状态码沿用默认的 200。Nginx 那边又写了 try_files 兜底到 index.php,任何不存在的路径都进得去,自己也没法靠文件是否存在判断。
第一版在 Nginx...