抓取与访问
HTTP 与重定向检查
检查状态码、重定向链和 URL 的最终目标。
01
这个工具检查什么?
我们逐跳跟踪 URL,记录每次重定向的状态与目标、最终 HTTP 状态、内容类型、响应大小和耗时——爬虫走的就是这条链。
02
结果该怎么看?
过长的链(3 跳以上)浪费抓取预算并稀释信号;http→https 和 www/非 www 应一跳到位。五次重定向后才 200 依然值得修。
03
下一步该做什么?
让内链和 Sitemap 直接指向最终 URL,不要指向会重定向的别名。
参考来源: MDN HTTP Redirections
InsightWonder
访问规则会在你不知情时改变
robots.txt 的改动和 CDN 的 bot 规则通常没人通知你。InsightWonder 会定期复检,某个爬虫开始被拦时告警。
开始深度分析- 定期复检 + 变化告警
- 跨 5 个 AI 引擎的可见度与引用分析
- 按影响排序的修复建议,并生成内容