当网站收录下降时,先不要批量提交 URL。应先检查同一内容是否被参数 URL、临时重定向、错误 canonical、重复语言版本或 sitemap 冲突反复暴露。统一 URL 信号有助于减少技术干扰,但不能保证恢复收录;还应区分有价值页面丢失与重复 URL 正常合并。
发布日期:2026 年 9 月 23 日 作者:SHMLANG Editorial Team 案例范围:双语 Next.js + WordPress 内容站
网站返回 200,并不代表索引结构就是健康的。搜索引擎看到的是 URL、重定向、canonical、hreflang、内部链接和 sitemap 共同形成的信号。如果同一批内容存在多个入口,Google 需要先判断哪些 URL 是重复页、哪些页面应该保留、哪些链接只是功能参数。
Google 将 canonicalization 定义为从一组重复或高度相似的页面中选择代表 URL。重定向、rel="canonical" 和 sitemap 都会影响这个判断,但这些信号如果互相冲突,Google 仍可能选择不同的 canonical。
本次排查聚焦以下代码路径。参数分页和分页自指 canonical 本身不是错误;需要处理的是入口规则不一致、重复入口持续扩散以及别名重定向缺少约束:
?page=2、?page=3 生成参数分页。这些问题不一定导致页面立即消失,但会扩大待抓取 URL 集合,分散抓取资源,也会让 Search Console 中的“重复网页”“已发现—尚未编入索引”和重定向类状态更难判断。
排查收录问题时,首先要给 URL 分类。
| URL 类型 | 是否应参与索引 | 推荐处理 |
|---|---|---|
| 正式文章、服务页、产品页 | 是 | 200、自指 canonical、进入 sitemap |
| 旧文章别名 | 否 | 单跳 301 到正式 URL |
| 跟踪参数 URL | 否 | 清除参数并 301 到干净 URL |
| 搜索、登录、注册页面 | 否 | noindex,并从 sitemap 排除 |
| 内容分页 | 视站点策略 | 保留可抓取链接,但避免形成低价值排名页 |
| 不存在的页码 | 否 | 返回真实 404 |
关键不是把所有带 ? 的 URL 一律屏蔽,而是判断参数是否改变了用户能够看到的主要内容。广告跟踪参数不应产生新页面;真正承载不同文章列表的分页则需要保留发现路径。
本次修复前,洞察栏目会产生以下 URL:
/zh/notes/?page=2
/en/notes/?page=2&utm_source=campaign
修复后统一为:
/zh/notes/page/2/
/en/notes/page/2/
旧参数 URL 使用单跳 301 转到对应的路径分页;只有跟踪参数、没有有效页码的 URL,则直接转到干净的洞察首页。
/en/notes/?page=2 -> 301 /en/notes/page/2/
/zh/notes/?page=2&utm_source=x -> 301 /zh/notes/page/2/
/en/notes/?utm_source=x -> 301 /en/notes/
路径分页并不天然比参数分页更利于排名。若现有参数分页稳定、信号一致,不必仅为 URL 形式迁移。清除跟踪参数前,还应确认统计系统如何保留归因数据。
这样处理有三个作用:
Google 说明,永久重定向会向索引系统提供目标 URL 应成为 canonical 的信号,而临时重定向通常不会表达同样的永久迁移意图。
如果完全阻止分页抓取,搜索引擎可能失去发现旧文章的内部路径;如果所有分页都参与索引,又可能产生大量价值相近的列表页。
本次采用的策略是:
noindex, follow。noindex 的作用是阻止分页本身出现在搜索结果中,而不是阻止搜索引擎访问页面。Google 也明确指出:只有爬虫能够访问页面时,才能读取其中的 robots meta 规则。
这是本站的索引取舍,不是所有分页都应 noindex 的通用规则。follow 不保证搜索引擎长期持续抓取这些链接;重要旧文章还需要来自可索引专题页和相关正文的直接内链,并进入准确的 sitemap。不能把 noindex 分页当成唯一发现入口,hreflang 也不能让被排除的分页重新具备索引资格。
单独增加 canonical 并不能解决所有重复 URL。如果 sitemap 仍提交旧地址、内部链接仍指向参数页、服务器仍返回临时重定向,搜索引擎收到的信号依然不一致。
正确的 URL 收敛应同时满足:
Google 的 sitemap 指南建议:如果同一内容可以通过不同 URL 访问,应选择首选 URL,并只把该版本放入 sitemap。
SEO 技术问题容易在新增页面、复制模板或修改路由时复发。因此,本次修复不仅调整线上行为,还增加了自动构建门禁。
构建前会检查:
200 + indexable 静态页面是否有页面级 canonical。noindex。只要新增页面遗漏 canonical 或 sitemap,或者内容别名退化成临时重定向,生产构建就会失败。这比上线后依赖人工抽查更可靠。
技术修复不能只看代码差异,必须从公网重新验证。以下数字来自 2026 年 9 月 23 日修复发布的验收记录,早于本文发布,是当时快照,不是实时库存。
本次验收覆盖了以下层级:
上述为定向验收,不代表全库测试通过。同期历史测试库记录为 155 项通过、39 项失败、1 项跳过,既有失败另行跟踪;静态门禁也不代替动态文章的接口与公网检查。
?page= URL:单跳 301。noindex, follow。page=1:永久回到栏目首页。这些数字证明发布后的技术状态符合预期,但不等于 Google 已经在同一天更新索引。
Search Console 反映的是 Google 最近一次抓取和处理后的状态,不是服务器当前代码的实时镜像。
修复发布后,通常还要经历:
因此,技术团队应分开记录三个状态:
把这三件事混在一起,容易出现“代码已经修好,但为什么数字没马上下降”的误判。
如果你正在处理“已发现—尚未编入索引”、重复网页或 canonical 冲突,可以按下面顺序检查:
<a href> 链接。不一定。搜索、筛选、分页和统计参数的作用不同。问题在于参数是否产生重复内容、是否被内部链接大量发布,以及 canonical、重定向和 sitemap 是否给出了互相矛盾的信号。
不是。应结合列表价值和发现架构决定。本案例选择排除列表分页,但重要文章还需其他可抓取内链与 sitemap 支持,不能只依赖 noindex, follow。
对于已经废弃的旧 URL,优先使用 301 转到新地址;对于仍然可以正常访问、但可能存在重复版本的页面,使用 canonical 表达首选版本。不要让 301 目标、canonical 和 sitemap 指向三个不同地址。
不建议把 robots.txt 当作 canonical 工具。阻止抓取后,搜索引擎可能无法读取页面上的 canonical 或 noindex。应根据 URL 类型使用永久重定向、canonical 或 robots meta。
没有固定时间。它取决于网站抓取频率、URL 数量、内容质量和 Google 的重新处理周期。可以确认的是技术信号何时修复完成,不能保证具体收录日期或排名位置。
URL 发现、重定向、canonical、hreflang、sitemap 和内部链接失配,是收录异常的一类技术原因,不是所有收录下降的唯一解释。还需要结合受影响页面、内容质量和报告日期判断。
有效修复需要完成三个闭环:
本次案例已经完成代码修复、生产发布和公网验证。后续观察重点不是反复修改页面,而是等待 Google 重新抓取,并在 Search Console 中按 URL 类型检查旧参数页、重复页和正式文章页的变化。
还没有评论,来发表第一条吧。