AI Read Scanner
AI Read 是一个用户触发的 AI 可访问性检测工具:只有当用户主动输入某个网址请求检测时,
我们才会抓取该页面一次。这等同于 ChatGPT-User / Perplexity-User 一类的
user-triggered fetch,而非批量索引爬虫。
我们的抓取行为
- User-Agent:
Mozilla/5.0 (compatible; AIReadScanner/1.0; +https://llmo.com.cn/api/bot)
- 单次扫描对目标站的请求数上限:约 10 个请求
(含页面、robots.txt、sitemap;渲染路径会加载该页的子资源,不含图片/字体/媒体)
- 整站抽样(仅当用户点击「抽样检测整站」时才会发生):在上面的请求之外,最多再请求
20 个页面(默认 12 个)加约 8 个辅助请求
(robots、sitemap);只请求同一主机下 sitemap 或首页链接里出现的页面,同时最多 3 个并发,
同一网站每天最多 3 次;只读静态 HTML,不执行 JavaScript
- 我们不遵守 robots.txt(用户触发型抓取),但严格限速,并对同一域名设置并发与日配额
如何屏蔽我们
在 WAF/CDN 中按 UA token AIReadScanner 拦截即可;屏蔽后我们会如实报告
「无法访问,无法判断」,不会编造结论。
联系我们:hyhiiip@gmail.com