AI 能读懂你的网站吗?
输入网址,看 AI 爬虫抓不抓得到、读不读得懂。
它检查什么
AI Read 像 AI 爬虫一样访问你的页面,检查四件事:robots.txt 和防火墙有没有放行 ChatGPT、Claude、Perplexity、Google 的爬虫;页面有没有 noindex 之类限制收录的声明;不执行 JavaScript 时能不能读到正文;以及渲染前后的内容差距有多大。
结果怎么看
检测完成后给出 0–100 的评分,每一项扣了多少分都写得清楚。测不出的项不计入,我们不会为了凑一个好看的数字而去猜。如果页面拒绝了我们的请求,我们只会写「无法判断」,不会换身份,也不会绕过验证。
网站能打开,AI 却读不懂?
常见原因有三个:防火墙把 AI 爬虫当成机器人拦住了;robots.txt 沿用旧规则,无意中禁止了 GPTBot、ClaudeBot 这类爬虫;页面要靠 JavaScript 才显示内容,不执行 JavaScript 的爬虫拿到的只是一个空壳。