Hat
编者
AI 爬取策略 (AI Crawl Policy)
💡 摘要 (Summary by DeepSeek-v4-Flash)
本文阐述了 BIRD 中文文档的 AI 爬取策略：采用 Content-Signal 规范，允许传统搜索和 AI 输入（RAG/Grounding），严禁将其用于 AI 训练，并依据 EU Directive 2019/790 Article 4 明确保留相关权利。
我们的立场
BIRD 中文文档是由社区志愿者无偿贡献、精心翻译的技术资料。我们希望这些内容：
- 能被 AI 搜索工具引用 —— 当用户通过 ChatGPT、Claude 等询问 BIRD 相关问题时，Bot 能够获取本站内容，并为终端用户提供带有准确引用的解答。
- 不被用于 AI 模型训练 —— 社区成员的翻译心血与无偿付出，不应被 AI 公司无偿抓取并用于训练其商业模型。
Content-Signal 策略
本站采用由 Cloudflare 联合发起的 Content-Signal 规范 来声明爬取权限，而非传统的、难以维护的逐个枚举 Bot User-Agent 的黑白名单方式。
Content-Signal 将 AI 爬虫的使用场景定义为以下三种：
| 信号 | 本站策略 | 说明 |
|---|---|---|
search | yes ✅ | 允许构建搜索索引，提供超链接及简短摘要。注意：不包括生成 AI 搜索摘要。 |
ai-input | yes ✅ | 允许将内容作为输入传递给 AI 模型，用于 RAG、Grounding 等，以便实时为终端用户提供生成式答案。 |
ai-train | no 🚫 | 严禁用于训练或微调任何 AI 模型。 |
技术实现
txt
User-agent: *
Content-Signal: ai-train=no, search=yes, ai-input=yes
Allow: /完整规则请参阅：bird.xmsl.dev/robots.txt
法律依据
根据 《欧盟数字单一市场版权指令》 (EU Directive 2019/790 on Copyright and Related Rights in the Digital Single Market, Article 4)，通过 Content-Signal 等机器可读方式表达的任何限制，均构成法律上对权利的明确保留（Express reservation of rights）。
免责声明
robots.txt 和 Content-Signal 属于自愿遵守的行业协议，本身并不具备强制性的技术约束力。部分 Bot 仍可能通过伪装身份或忽略协议来绕过限制。
因此，本站保留通过技术手段（如 WAF、速率限制或爬虫特征拦截）对违反本策略的恶意爬取行为进行主动防御的权利。
本文译者及原文信息
本文档最后更新时间： 2026-05-02