robots.txt 挡住 /static 后 移动端渲染脚本全丢怎么发现 陆零云 2026-11-11 12:30:26 31 0 移动端 URL 检查里,已渲染 HTML 的样式全丢,按钮挤成竖排。同一个页面在桌面版检查里正常。第一反应是 CDN 把 CSS 拦了,翻回源日志,CSS 请求根本没到源站。 再往前查一层,是 robots.txt。三个月前为了压抓取,运维在文件末尾加了一条 Disallow: /static/,理由是「静态资源不用抓」。这条规则对蜘蛛有效,对渲染队列也有效,渲染时拿不到 CSS 和 JS,页面按裸 HTML 打分。 受影响的不是一两个页。日志里 2,90...