Google 10.30 官宣统一 AI 训练管控,WordPress 企业站要不要改 robots.txt?

现阶段,不建议大家仅凭 Google 本次公告,就批量修改所有网站的 robots.txt 文件。Google 这套全新的统一 AI 训练控制机制,计划 2027 年才正式启用。

已经部署 Google-Extended 规则的站点,原有设置依旧有效;还没有配置相关 AI 爬虫限制规则的企业网站,不用因为担心排名波动,仓促新增限制指令。

WordPress 企业网站的 robots.txt,有可能由服务器、SEO 插件或者其他程序自动生成。修改前,一定要先访问网站前端,确认对外生效的 robots.txt 真实内容,不能只看后台插件设置。

如果你的网站现有配置为:
User-agent: Google-Extended
Disallow: /
建议重新评估这条限制是否匹配自身 AI 内容策略。如果希望内容可以用于 Gemini 的 Grounding 检索场景,需要清楚 Google-Extended 会带来的影响。

还没有制定 AI 内容使用政策的企业,可以先梳理清楚内容权限:哪些内容允许正常检索传播、哪些内容禁止用于 AI 模型训练、哪些内容本身不对外公开。等 Google 完整发布统一管控机制的落地细则后,再做配置调整、上线测试。

另外,建议留存 robots.txt 每一次修改记录,后续如果出现收录、索引、AI 引用异常,方便追溯排查配置变更原因。

滚动至顶部