陆零云
29
0
把全站 46 个栏目页的内链导出来数了一遍,1,200 条链接里 1,104 条指向列表页和分页,指向详情页的只有 96 条。详情页平均抓取间隔 11 天,最久的一条 38 天没被抓过。
第一反应是加相关推荐。模板里随机取 6 条同栏目文章,一个月后复查,详情页内链从 96 涨到 1,900,但分布极端:前 20 个热门页各收到 800 多条,长尾页还是一条没有。随机取的是按发布时间倒序的前几条,等于把权重全灌给最新文章。
改成按类目加型号关联。每页固定...
陆零云
23
0
1200 篇文章从首页要点四次才到:首页、技术中心、2025 年归档、文章。GSC 抓取统计里这批页面的平均抓取间隔 26 天,栏目首页是 1 天。抓取预算就那么多,深一层就少一轮。
先在 sitemap 里把这 1200 条全列出来,三周后抓取间隔只从 26 天降到 24 天。sitemap 能告诉爬虫有哪些 URL,但不改变页面在站内的位置,入口不变,它算出来的深度也不变。
动的是站内结构。栏目页顶部加「最新 30 篇」和「本月热门 10 篇」,全部直...