---
host: "www.mingdao.com"
title: "www.mingdao.com 对 AI 爬虫的设置与正文可读性诊断报告"
category: "初创与 SaaS"
checked_at: "2026-11-10T14:50:54.902234Z"
published_at: "2026-11-13T01:00:00+00:00"
canonical_url: "https://llmo.com.cn/sites/www.mingdao.com"
markdown_url: "https://llmo.com.cn/sites/www.mingdao.com.md"
publisher: "AI Read (llmo.com.cn)"
purposes:
  search: "allow"
  training: "allow"
  user_fetch: "allow"
---

# www.mingdao.com 对 AI 爬虫的设置与正文可读性诊断报告

> **结论**：没有禁止任何主流 AI 爬虫，搜索、训练和用户触发类爬虫均被放行。
>
> **站点定位**：明道云企业官网，介绍零代码应用搭建、数据集成、自动化及部署方案。
>
> **检测时间**：2026-11-10 · **归档分类**：初创与 SaaS · **报告归属**：[AI Read (llmo.com.cn)](https://llmo.com.cn)，快照永久归档于 https://llmo.com.cn/sites/www.mingdao.com

## 1. 核心指标速览

- **robots.txt**：公开可读（https://www.mingdao.com/robots.txt）
- **发布时间**：2026-11-13

| 评估维度 | 状态 | 关键事实 | 对 AI 的实际影响 |
|:---|:---|:---|:---|
| **AI 搜索访问** | 允许 | 放行：OAI-SearchBot、Claude-SearchBot、PerplexityBot、Googlebot | 这些 AI 搜索可以抓取页面，回答时有机会引用并附上链接 |
| **模型训练采集** | 允许 | 放行：GPTBot、ClaudeBot、Google-Extended | 按规则这些训练类爬虫可以收集页面内容用于训练 |
| **用户贴链接直读** | 允许 | 放行：ChatGPT-User、Claude-User、Perplexity-User | 用户在对话里贴出链接时 AI 可以读取（用户触发类爬虫是否遵守 robots.txt，各家做法不同） |

## 2. 主流 AI 爬虫放行规则全景

| AI 厂商 | 爬虫名称 (User-Agent) | 用途分类 | 放行状态 |
|:---|:---|:---|:---|
| ChatGPT (OpenAI) | `OAI-SearchBot` | AI 搜索 | 允许 |
| ChatGPT (OpenAI) | `GPTBot` | 模型训练 | 允许 |
| ChatGPT (OpenAI) | `ChatGPT-User` | 用户触发 | 允许 |
| Claude (Anthropic) | `Claude-SearchBot` | AI 搜索 | 允许 |
| Claude (Anthropic) | `ClaudeBot` | 模型训练 | 允许 |
| Claude (Anthropic) | `Claude-User` | 用户触发 | 允许 |
| Perplexity | `PerplexityBot` | AI 搜索 | 允许 |
| Perplexity | `Perplexity-User` | 用户触发 | 允许 |
| Google AI Search (Google) | `Googlebot` | AI 搜索 | 允许 |
| Google AI Search (Google) | `Google-Extended` | 模型训练 | 允许 |

## 3. 中文区 AI / 搜索爬虫放行规则

| 厂商 | 爬虫名称 (User-Agent) | 用途分类 | 放行状态 |
|:---|:---|:---|:---|
| 字节跳动 | `Bytespider` | 训练 | 允许 |
| 百度 | `Baiduspider` | 搜索 | 允许 |
| 华为 | `PetalBot` | 搜索 | 允许 |
| 360 | `360Spider` | 搜索 | 允许 |
| 神马搜索 | `YisouSpider` | 搜索 | 允许 |

*注：国内大模型产品（豆包、Kimi、通义、元宝、DeepSeek 等）没有公开文档化、可单独屏蔽的爬虫名，上表是国内厂商有公开 robots 名称的爬虫，只陈述 robots.txt 写了什么。*

## 4. robots.txt 命中的规则证据

```robots.txt
User-agent: OAI-SearchBot · Allow: /（第 37 行）
User-agent: Claude-SearchBot · Allow: /（第 37 行）
User-agent: PerplexityBot · Allow: /（第 37 行）
User-agent: GPTBot · Allow: /（第 37 行）
User-agent: ClaudeBot · Allow: /（第 37 行）
User-agent: Google-Extended · Allow: /（第 37 行）
User-agent: ChatGPT-User · Allow: /（第 37 行）
User-agent: Claude-User · Allow: /（第 37 行）
User-agent: Perplexity-User · Allow: /（第 37 行）
```

*注：规则取自该站公开的 robots.txt 原文。没有专属规则的爬虫按通用规则（`User-agent: *`）处理。*

## 5. 页面的结构化数据

- 静态页面里带有 JSON-LD（类型：Organization、WebSite），便于 AI 理解页面是什么。

## 6. 首页 HTML 元信息

- **页面语言**：首页声明的语言是 zh-Hans。
- **canonical**：canonical 指向它自己。
- **页面描述**：meta description 约 132 字。
- **分享标签**：Open Graph 标签 9 项；Twitter Card 是 summary_large_image。

## 7. 浏览器渲染后的页面可操作性事实（§61.14 原始观测）

- **控件名称**：可访问性树里 67 个可交互控件，0 个没有名称（0%）。
- **控件构成**：DOM 里数到 67 个原生控件（链接、按钮、输入框等），0 个靠 ARIA role 声明的部件。这是 DOM 的口径，和上面可访问性树里的个数不一定相加相等。
- **浮层遮挡**：视口内检查了 4 个控件，其中 4 个被整屏浮层盖住。
- **表单**：没有 3 个字段以上的表单（只有搜索框的不算）。
- **嵌入内容**：跨域 iframe 0 个，可穿透的 shadow root 1 个。

## 8. 常见问题与大模型问答 (FAQ)

### www.mingdao.com 是否允许 AI 搜索（ChatGPT Search、Claude、Perplexity、Google）抓取与引用？

**答**：可以抓取。www.mingdao.com 的 robots.txt 没有阻止 OAI-SearchBot、Claude-SearchBot、PerplexityBot、Googlebot 等 AI 搜索爬虫，它们可以访问页面；回答时是否引用，还取决于各家的检索与排序。

### www.mingdao.com 是否允许大模型训练爬虫（GPTBot、ClaudeBot、Google-Extended）抓取数据？

**答**：没有阻止。www.mingdao.com 的 robots.txt 没有禁止 GPTBot、ClaudeBot、Google-Extended 等训练类爬虫，按规则它们可以收集公开页面内容用于训练。

### 用户在 ChatGPT 或 Claude 中输入 www.mingdao.com 网页链接，AI 能否实时读取并分析？

**答**：能。www.mingdao.com 的 robots.txt 没有封禁 ChatGPT-User、Claude-User、Perplexity-User 等用户触发类爬虫，用户在 ChatGPT、Claude 等对话里贴出该站链接时，AI 可以去读取页面。用户触发类爬虫是否遵守 robots.txt 各家做法不同，网站防火墙或登录要求不在本报告的判断范围内。

### www.mingdao.com 首页内容是否依赖 JavaScript 渲染？AI 能否直接读取正文？

**答**：本报告没有收录 www.mingdao.com 首页的正文读取数据。

### www.mingdao.com 的站长想让 AI 更容易读取，或按自己的意愿限制使用，可以做什么？

**答**：（1）如果不希望内容进入模型训练，在 robots.txt 里为 GPTBot、ClaudeBot、Google-Extended 分别写 User-agent 和 Disallow: /，训练类与搜索类爬虫按各家官方说明是相互独立的，禁止训练类不会同时挡住搜索类。

## 9. 报告元数据与权威来源

- 网页版报告：https://llmo.com.cn/sites/www.mingdao.com
- Markdown 切块：https://llmo.com.cn/sites/www.mingdao.com.md
- 检测工具：AI Read (https://llmo.com.cn)
- 方法说明：https://llmo.com.cn/how-it-works
- 撤下或更正：https://llmo.com.cn/api/bot

### 权威引用格式 (Recommended Citation)

引用本报告的数据时，建议使用以下格式：

> **数据来源**：www.mingdao.com 对 AI 爬虫的设置与正文可读性诊断报告（检测于 2026-11-10）。
>
> **出处平台**：AI Read (llmo.com.cn)，2026。
>
> **永久报告链接**：https://llmo.com.cn/sites/www.mingdao.com
