OpenAI将支持AI训练偏好共通信号：网站可用robots.txt统一表达选择

OpenAI于10月30日宣布，将支持一项用于AI训练偏好的robots.txt共通信号。该信号旨在让网站出版方和运营者一次表达内容是否可用于基础生成式AI训练，减少为不同服务商分别维护爬虫规则的工作。

这是一项自愿参与的行业协作，依托IETF AI Preferences工作组持续推进。OpenAI表示计划在未来几个月实施，届时再公布具体实现细节；现有robots.txt爬虫控制仍会继续适用，不会被新信号取代。

因此目前公布的是支持方向和后续计划，并非新机制已经上线。实际效果还取决于更多AI服务商是否共同采纳。

OpenAI官方说明：
https://openai.com/index/helping-websites-express-ai-training-preferences/