分页重复收录 4200 条:rel next prev 现在怎么用

9 月中旬站上 4200 条分页被重复收录,GSC 里「重复网页,未选择为规范网页」占了整站三分之一。列表页一共 140 页,每页 20 条,第 2 页往后几乎全在这个状态里。

当时的做法是加 rel next / prev,每个列表页头部补两行 link。写完等两周,4200 变成 4100,等于没动。

<link rel="next" href="https://ex.com/list/2.html">
<link rel="prev" href="https://ex.com/list/">
<link rel="canonical" href="https://ex.com/list/2.html">

有件事要说清楚:Google 在 2019 年就公开说过不再把 rel next / prev 当索引信号,它现在更像个注释,对发现下一页有点用,对去重没用。百度这边我测下来也一样,加和不加,收录数字没有可观察的差别。

真正起作用的是 canonical。原来第 2 页的 canonical 全指回第 1 页,本意是合并权重,结果 Google 判定第 2 页是副本不收录,链接权重又没算到第 1 页,两头空。改成每页自指之后,第 2 页才开始单独进索引。

title 也一起改了。原来 140 页完全一样,只在末尾加「第 N 页」;后来把页码提到前面,写成「云服务器价格 第 3 页」,并且保证第 1 页不出现页码。

sitemap 收了一下,只留第 1 页和最近 30 天有新内容的第 2 页,其余不进 sitemap,让爬虫顺着链接自己走。

还有个细节:列表页的 /list/?page=3 和 /list/3.html 两个地址同时能打开,等于每个分页都有两份。统一到后者,带参数的 301 过去,这一项就清掉了 900 条重复。

结果:10 月 20 日「重复网页」从 4100 降到 780,抓取请求从每天 5.6 万降到 2.3 万,第 2 到 5 页的落地页转化反而涨了,因为以前这些页根本没被收录。

rel next / prev 我留着,不占什么地方,也不会带来伤害。指望它解决重复收录,会白等两周,而这两周本来可以拿去改 canonical。

您可以还会对下面的文章感兴趣: