收录优化：改版或迁移时应核对什么
📱 Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)
🔗 /8efc95358687.html
📄
收录优化：改版或迁移时应核对什么
改版或迁移时，收录优化要核对的核心是：旧URL能否顺利把信号传递给新URL、新页面是否可抓取可索引、旧入口是否被错误保留或错误屏蔽。判断依据不是“提交了就行”，而是抓取日志、HTTP状态、canonical、robots与站点地图之间是否一致。若不一致，先修技术链路，再谈内容质量。
先核对URL映射，而不是先看收录量
改版或迁移后收录波动，最常见的原因不是新页面差，而是旧URL没有正确指向新URL。此时应逐条核对：
- 旧URL返回什么状态码。301表示永久跳转，302是临时跳转，404表示已丢失，200表示旧页仍可访问。
- 跳转目标是否为新页面的最终URL，而不是跳到首页或中间页。
- 是否存在跳转链，例如A跳B、B再跳C。跳转链越长，抓取和信号传递越容易损耗。
- 参数URL、带斜杠与不带斜杠、http与https版本是否都指向同一最终地址。
如果旧URL仍返回200且内容还在，搜索引擎可能继续保留旧页，新页难以接替。如果旧URL直接404且没有跳转，已积累的外部链接和点击会丢失。适用条件是：只要URL结构发生改变，就应做映射表；若只是页面模板微调、URL不变，则重点转向canonical和渲染检查。
核对可抓取与可索引，不要混为一谈
可抓取指搜索引擎能否请求到页面，可索引指页面能否进入索引。改版时经常出现“能打开但没收录”，原因可能出在以下环节：
robots.txt是否误屏蔽了新目录或整站。注意，robots.txt的抓取限制不等于可靠的索引移除；它主要阻止抓取，已收录页面仍可能因外部链接等原因出现在结果中。- 页面是否带有
<meta name="robots" content="noindex">。改版测试阶段常加noindex，上线后忘记移除。 - canonical是否指向旧URL、测试域名或错误页面。若canonical指向别处，当前页面可能不被当作主版本。
- 服务器是否对搜索引擎返回403、503或超时。先看抓取统计和日志，再判断是屏蔽还是性能问题。
- 站点地图是否只包含新URL，且这些URL返回200、可索引、不是跳转页。站点地图不保证收录，它只是发现入口。
这里要区分“可能原因”和“已经定位的原因”。例如新页未收录，可能是noindex、可能是抓取预算不足、也可能是内容重复，不能只看一个现象就断言唯一原因。核对顺序应是：先确认HTTP状态，再确认robots与noindex，再确认canonical，最后看站点地图和内部链接。
核对HTTPS、重定向与安全边界
迁移到HTTPS时，要核对证书是否覆盖所有子域、混合内容是否清除、http版本是否301到https最终地址。但HTTPS不保证安全无漏洞，也不保证排名。它只是传输层条件之一。若证书过期、证书链不完整，浏览器会拦截，搜索引擎抓取也可能失败。
常见核对项：
- 用
curl -I检查旧URL返回的状态码和Location头。 - 确认最终URL与canonical、站点地图、内部链接中的地址完全一致。
- 检查页面内是否仍有http资源，例如图片、脚本、样式表。
- 确认HSTS等设置不会把测试环境锁死，导致回滚困难。
适用条件：全站HTTPS迁移、域名更换、目录结构调整时都要做。若只是单页内容更新，HTTPS核对可简化为证书有效期和混合内容检查。
用日志和抓取数据判断，而不是凭感觉
改版后要收集证据。可执行的步骤是：
- 导出改版前一段时间的抓取日志，按URL分组，记录搜索引擎抓取频次和状态码。
- 改版后同一时间段再导出一次，对比旧URL和新URL的抓取变化。
- 筛选返回301、302、404、403、503的URL，按数量排序。
- 抽查高价值页面：旧URL是否301到最相关新页，新页是否可索引，canonical是否自指。
- 检查站点地图中的URL是否全部返回200，且不包含noindex或跳转页。
判断结果：如果旧URL大量404且无跳转，优先补301；如果新URL大量被noindex，优先移除错误标签；如果抓取正常但长期不收录，再检查内容质量、重复度和内部链接。不同搜索引擎对canonical、站点地图、robots的支持细节不同，须分别核查，不能用一个平台的表现代替全部。
决策顺序：先保旧信号，再放新页面
改版或迁移时，代价最低的做法是保留旧URL并原地更新内容；若必须换URL，则用301把旧URL逐一指向最相关的新URL，而不是全站跳首页。全站跳首页会丢失页面级相关性，代价是旧页积累的链接和点击无法准确传递。若旧URL数量巨大，可先处理有外部链接和自然点击的页面，再处理长尾页。
下一步：建立一张“旧URL—状态码—跳转目标—canonical—站点地图—是否可索引”的核对表，按高价值页面优先修复。完成技术核对后，再观察抓取日志中旧URL是否逐渐减少、新URL是否逐渐增加。
