抓取与访问
LLMs.txt 验证器
验证文件位置、结构和链接目标。
01
这个工具检查什么?
llms.txt 是放在站点根路径的 markdown 文件,告诉语言模型你的网站是什么、权威内容在哪里。我们检查它是否存在、是否以 H1 开头、链接是否分节组织、是否用 markdown 链接而不是裸 URL。
02
结果该怎么看?
llms.txt 是新兴约定,不是标准——它有助于模型发现内容,但没有任何厂商承诺一定读取。把它当辅助,不要当开关。
03
下一步该做什么?
保持被链接页面可抓取、内容新鲜;llms.txt 指向被封锁的页面毫无意义。
参考来源: llms.txt spec
InsightWonder
访问规则会在你不知情时改变
robots.txt 的改动和 CDN 的 bot 规则通常没人通知你。InsightWonder 会定期复检,某个爬虫开始被拦时告警。
开始深度分析- 定期复检 + 变化告警
- 跨 5 个 AI 引擎的可见度与引用分析
- 按影响排序的修复建议,并生成内容