"网站上线三个月，收录的页面一只手数得过来。"这是企业站长高频求助的问题。收录是流量的地基，收录低，后面的一切都无从谈起。大部分收录问题，根源都在 6 个技术细节上——逐个排查，多数都能当场定位、当场修复。
细节一：robots.txt 是否误封
robots.txt 是给爬虫的"进站须知"，一旦写错，可能整站被拒之门外。最常见的错误：把不该屏蔽的目录（如产品页、文章页所在路径）误写成 Disallow；或者写错了语法，导致全部禁爬。自查：打开 你的域名/robots.txt，对照确认没有误封重要路径，并允许百度/谷歌蜘蛛访问。
细节二：sitemap 是否提交与更新
sitemap 是给搜索引擎的"内容地图"。很多网站建站时生成过一次 sitemap 就再没管过——新页面不断上线，地图却停留在旧版。自查：sitemap 是否覆盖全部重要页面？是否提交到了百度搜索资源平台、Google Search Console？网站每次发布新内容后，sitemap 有没有更新？
细节三：页面是否 JS 渲染过度
这是 2026 年最常见的收录杀手。网站重度依赖 JavaScript——页面内容全靠浏览器里的代码现场拼装，而爬虫抓取时看到的是空白和乱码，自然无法收录。自查：用"查看源代码"看看关键内容是不是直接在 HTML 里，而不是靠 JS 动态生成。如果内容都在 JS 里，需要做服务端渲染（SSR）或预渲染。
细节四：是否被防火墙/防护误拦截爬虫
为了防攻击，很多网站配置了 WAF、防火墙或 CC 防护，结果把正常的搜索引擎蜘蛛也当成黑客拦在门外。自查：登录日志里有没有大量"访问被拒绝"的记录来自百度/谷歌的蜘蛛 IP？如果有，需要在防护规则里给搜索引擎蜘蛛放行。
细节五：URL 是否动态参数过多
URL 里堆满 ?id=123&type=456&page=2 这种参数，搜索引擎会把每个参数组合当成不同页面，既浪费抓取配额，又容易造成大量重复页面。自查：重要页面是否用了简洁的静态化 URL（如 /products/cnc/）？如果能，把动态参数 URL 301 到静态地址。
细节六：死链与重定向问题
大量 404 死链和错误的 301/302 跳转，会消耗抓取配额、传递错误信号。自查：用站长工具的"死链检测"功能扫一遍，把死链清理或 301 到相关页面；确保改版时旧地址都正确跳转到新地址，不丢权重。
每个细节的修复方法一句话
- robots 误封 → 修正 robots.txt，放行必要路径
- sitemap 陈旧 → 提交并保持更新，覆盖全部页面
- JS 渲染过度 → 改为服务端渲染/预渲染，让内容进 HTML
- 防火墙误拦 → 放行搜索引擎蜘蛛
- 动态参数过多 → 静态化 URL，做 301 迁移
- 死链重定向 → 清理死链、修正跳转
收录低不是玄学，是技术细节的层层扣分。 拿这 6 个细节给你的网站做一次"收录体检"，多半能找到那个卡住收录的关键点。修好了技术基础，再谈内容、谈排名——地基不打牢，上面盖什么都白搭。