老域名 301 过来 60 天:新站收录为什么还停在 40 条

老站 3,200 条内容整体搬到新域名,映射表一条条对过,301 全部一跳到位。60 天后新站收录 40 条,老站索引还剩 2,700。这个数字很难看,等于搬家搬了一半。

第一反应是 301 没生效。抽 50 条 Curl -I,全部 301,Location 指向新站对应页,没有跳转链。百度后台的改版规则也提交了,状态是校验中。

怀疑新站抓取太少。翻日志,百度每天来 300 次,其中 240 次抓的是老站的跳转,新站被直接抓的只有 60 次。蜘蛛大部分时间在跟跳转,没把新站当主体。

真正的原因在新站模板。canonical 里写的是老域名,搬家时从旧模板复制过来忘了改。3,200 个页面的 canonical 全指向老站,等于告诉搜索引擎新站是副本。

改 canonical 花了一个下午,sed 批量替换模板,再扫一遍产物确认没有残留。改完抓取结构慢慢变了。

映射表里还有 210 条指向新站不存在的页。老站有些专题没搬,301 落到 404,蜘蛛连着吃了几次 404,整批 URL 的抓取优先级都降了。这 210 条改成 301 到最近的栏目页。

while read -r old new; do
  code=$(curl -o /dev/null -s -w '%{http_code}' "$old")
  loc=$(curl -sI "$old" | awk '/^[Ll]ocation/{print $2}')
  echo "$code $loc $new"
done < map.txt

第三件事是 sitemap。搬家时只提交了新站首页,3,200 条一条没进。重新生成后提交,条数对得上,lastmod 用真实更新时间,没批量刷成当天。

第 75 天新站收录 1,100,第 100 天 2,400,老站索引降到 400 以下。整个过程里最贵的是那 60 天,白等两个月才发现 canonical 写错。

确认方式:抽 100 个新站页面看 canonical 是不是自身 URL;老站 301 的落地页必须是 200;再看索引量曲线,新老站此消彼长才算迁移完成。搬家清单第一项现在就是查域名。

您可以还会对下面的文章感兴趣: