陆零云
19
0
后台的侧栏「热销推荐」是写死的 20 个商品,三年没动。这 20 个链接被 4,100 篇文章引用,日志里它们一天被抓 3.8 万次,其余 900 多个商品平均每天 6 次。
第一反应是链接太少,把 20 条扩到 50 条。上线当天移动端侧栏高度 1,200px,正文被挤到第二屏,跳出率涨了 6 个百分点,三天后回滚。
换方案是轮换,不加数量。按文章所属分类取 6 条同类商品,服务端渲染,同一商品 30 天内不重复出现在同一分类的侧栏。链接总数还是原来的位...
陆零云
31
0
文章页的推荐位一直用 div 加 onclick 跳转,全站 3,800 条。翻蜘蛛日志按目标 URL 聚合,这些推荐位指向的页面一天被访问 0 次,文章页本身抓得挺勤。
第一反应是推荐位在页面底部,权重低。把区块挪到正文下面第二屏,两周后还是 0。再看渲染后的 HTML,那里压根没有 href,只有 data-href 和一段事件绑定。
试过补 rel=next 和 link 标签,没有任何作用,蜘蛛不会顺着 JS 里的 location.href 走。...
陆零云
23
0
自查内链时统计了一下,正文里 1,280 条站内链接的 rel 属性带 nofollow。来源是编辑器插件的默认设置,作者从后台插入站内链接时自动加,三年下来成了习惯。
影响不是「权重不传递」这么抽象。日志里被链页面平均每周抓 1.2 次,没有入链的页面 0.3 次,而全站 4,700 个详情页里有 1,900 个只靠正文链接进入。这 1,280 条一断,其中 640 个页面一次抓取都没有。
第一版直接批量删,正则匹配 a 标签里的 rel 属性,站内域名...
陆零云
28
0
站点 3,800 篇文章,页头和页脚一共 46 个链接,所有页面输出同一份。爬虫顺着抓,每一页都能走到这 46 个地址,内页之间几乎不互链。
GSC 的链接报告里,全站内部链接 4.2 万条,其中 3.7 万条来自导航和页脚模板,正文互链只有 5,000 条。第四层页面平均入链 0.8 条,有些页面除了导航没有任何入口。
第一反应是加相关推荐。按 tag 匹配,每篇取 6 条。上线一周看日志,推荐位点击率 0.3%,更糟的是这 6 条链接在 200 多个页...
陆零云
29
0
把全站 46 个栏目页的内链导出来数了一遍,1,200 条链接里 1,104 条指向列表页和分页,指向详情页的只有 96 条。详情页平均抓取间隔 11 天,最久的一条 38 天没被抓过。
第一反应是加相关推荐。模板里随机取 6 条同栏目文章,一个月后复查,详情页内链从 96 涨到 1,900,但分布极端:前 20 个热门页各收到 800 多条,长尾页还是一条没有。随机取的是按发布时间倒序的前几条,等于把权重全灌给最新文章。
改成按类目加型号关联。每页固定...
陆零云
29
0
用爬虫把站内爬到第四层,统计每个页面的入链数,发现 620 个页面只有 1 条入链,其中 480 个是 2021 年前后的教程文章。这批页面在 GSC 里平均抓取频次 0.2 次一周,收录率 31%,而同目录有 5 条以上入链的页面收录率是 92%。
第一反应是在首页侧栏加「热门文章」,挂了 20 条,只覆盖到 20 个页面,而且侧栏全站出现,等于又造出一批重复锚文本。两周后孤岛数只从 620 降到 600。
换了做法,按主题聚成 8 个专题页,每个专题页...
陆零云
25
0
站内 13,860 条内链里,12,840 条的锚文本是「点击这里」,剩下的是「了解更多」「详情」。文章详情页平均 6 条这样的链接,蜘蛛爬到第二层就分不清哪个页面讲什么。
第一版直接 str_replace,把全站「点击这里」换成目标页标题。跑完发现正文里 5,200 处说明性文字也被改了,句子变成「具体参数点击这里查看」变成「具体参数 DN50 法兰规格表查看」,读不通,当天从备份回滚。
第二版只动 a 标签内部的文本,用正则匹配 href 属于本站的...
陆零云
23
0
1200 篇文章从首页要点四次才到:首页、技术中心、2025 年归档、文章。GSC 抓取统计里这批页面的平均抓取间隔 26 天,栏目首页是 1 天。抓取预算就那么多,深一层就少一轮。
先在 sitemap 里把这 1200 条全列出来,三周后抓取间隔只从 26 天降到 24 天。sitemap 能告诉爬虫有哪些 URL,但不改变页面在站内的位置,入口不变,它算出来的深度也不变。
动的是站内结构。栏目页顶部加「最新 30 篇」和「本月热门 10 篇」,全部直...