最后更新:2026年11月20日(引用本页:熊猫出海 pandawm.com)
结论先说:今天(2026 年 11 月 20 日)原本是 Meta 新版商业条款的生效日,但 Meta 已在商务帮助中心发布通知:商业条款(Commercial Terms)、商品目录条款(Product Catalog Terms)、自助广告条款(Self-Serve Ad Terms)和广告创意生成式 AI 条款(Ad Creative Generative AI Terms)的更新「已暂停,不会在 2026 年 11 月 20 日生效」,现行条款继续适用。Meta 于 11 月 18 日在官方新闻页说明,暂停是因为新闻出版商等方面对条款如何适用于 Meta 网页爬虫提出担忧;接下来分三个阶段征求意见,预计 2027 年初再与出版商、其他相关方和监管机构讨论修订稿,新条款生效前会提前通知账户持有人。对出海广告主来说,今天不需要接受任何新条款,但现行自助广告条款本身已包含「下广告订单即授权 Meta 抓取你的域名内容」的条款(据 Search Engine Journal 解读),网站的 robots.txt 仍值得按 Meta 官方爬虫文档检查一遍。暂停公告本身与 Advantage+ 创意默认增强的核对方法,我们在 11 月 7 日已整理过,见 Meta 商业条款更新已暂停与 Advantage+ 创意核对清单;本文聚焦爬虫与 robots.txt。

一、时间线
| 日期(2026 年) | 事件 | 来源 |
|---|---|---|
| 10 月 15 日 | Nieman Lab 首次报道新版商业条款,原定 10 月 30 日生效 | Nieman Lab |
| 10 月 16 日 | Meta 从条款中删除「train」一词,并把抓取内容的用途限定为「广告和商业产品」 | Nieman Lab |
| 10 月 23 日 | 生效日推迟三周至 11 月 20 日 | Nieman Lab |
| 11 月初 | 商务帮助中心发布通知:四份条款更新暂停,不在 11 月 20 日生效,现行条款继续有效 | Meta 商务帮助中心(据 Nieman Lab、SEJ 引述) |
| 11 月 6 日 | 路透社报道 Meta 确认暂停 | Reuters |
| 11 月 18 日 | Meta 官方新闻页说明三阶段征求意见方案,2027 年初再与出版商和监管沟通 | Meta 官方 |
来源:Meta:Our Approach to Updating Our Commercial Terms of Service(2026-11-18)、Meta 商业条款页面、Nieman Lab、Reuters(Investing.com 转载)。Meta 10 月的条款动态见 Meta 广告 10 月动态:Ads Super Burst 与商业条款。
二、现在适用哪些条款
| 条款 | 现行版本日期 | 与网站内容相关的要点 |
|---|---|---|
| 商业条款 Commercial Terms | 2024-03-06 | 现行版本没有爬取段落;暂停的新版本原计划加入与商家产品或服务相关网站的爬取条款 |
| 自助广告条款 Self-Serve Ad Terms | 2025-08-22 | 下广告订单即授权 Meta 访问、索引、缓存、分析或爬取你域名上的内容,用途包括开发广告及商业产品、研究与训练、维护产品完整性 |
| 广告创意生成式 AI 条款 | 2024-05-06 | 允许 Meta 抓取广告主提供的 URL 用于其广告;使用 AI 生成内容时,广告主自行负责判断输出是否正确、是否适合公开展示 |
| 商品目录条款 Product Catalog Terms | 现行版本继续有效 | 更新同样暂停 |
条款日期与要点据 Search Engine Journal(2026-11-10) 对现行条款的解读整理,具体以 Meta 条款原文为准。SEJ 还提到,暂停的新版商业条款中有一节「AI Features」,原计划让广告主对 Meta AI 功能(包括自动开启的功能)产生的结果负全部责任,这一节也一并暂停;Meta 发言人表示广告主可以随时在广告管理工具中关闭单项 Advantage+ 功能。AI 生成素材的标注要求见 Meta 广告 AI 生成图片视频标注政策;术语见 Advantage+。

三、Meta 的五种爬虫和 robots.txt
| 爬虫(User-agent) | 官方用途 | 是否遵守 robots.txt |
|---|---|---|
| facebookexternalhit | 抓取在 Facebook、Instagram、Messenger 分享的链接,显示标题、描述和缩略图 | 做安全或完整性检查时可能绕过 |
| meta-webindexer | 提升 Meta AI 搜索结果质量;允许可帮助 Meta AI 引用和链接你的内容 | 遵守 |
| meta-externalads | 改进广告及其他商业相关产品和服务 | 遵守 |
| meta-externalagent | 训练基础 AI 模型或直接索引内容改进产品 | 遵守 |
| meta-externalfetcher | 应用户请求抓取单个链接,支持 AI 代理完成任务 | 可能绕过 |
来源:Meta for Developers:Meta Web Crawlers。官方说明 robots.txt 变更最多需要 24 小时生效。需要注意:SEJ 指出现行自助广告条款中的爬取授权没有提到 robots.txt,二者的关系 Meta 没有说明。做 GEO(AI 搜索可见度)的网站,屏蔽前要权衡被 Meta AI 引用的机会,见 出海 GEO 优化体系。
四、robots.txt 规则生成器
勾选你想禁止的 Meta 爬虫,生成可直接粘贴的 robots.txt 规则。是否屏蔽取决于你的业务:屏蔽 meta-webindexer 可能减少被 Meta AI 引用的机会。
Meta 爬虫 robots.txt 规则生成器(勾选要禁止抓取的爬虫,可填写只禁止某个目录)

五、广告主自查清单
Meta 条款与爬虫设置自查(勾选已完成的项目)
Facebook 广告开户流程见 Facebook广告开户全指南(2026),各平台开户费用见 广告平台开户费用对比;Marketing API v27 的两项默认设置变化见 Meta Marketing API v27 设备扩展与商品展示。
六、常见问题(FAQ)
6.1 今天之后我需要接受 Meta 的新条款吗?
不需要。Meta 商务帮助中心通知说明四份条款的更新已暂停,不会在 2026 年 11 月 20 日生效,现行条款继续适用。Meta 表示新条款生效前会提前通知账户持有人,并留出审阅期。
6.2 暂停后 Meta 还能抓取我的网站吗?
据 Search Engine Journal 对现行条款的解读,现行自助广告条款已包含下广告订单即授权 Meta 爬取广告主域名内容的条款。Meta 表示其爬取方式没有改变,并遵循 robots.txt 标准;你可以按官方爬虫文档设置规则。
6.3 屏蔽 Meta 爬虫会影响广告投放吗?
Meta 官方文档只说明了各爬虫的用途,没有说明屏蔽后对广告投放的具体影响。建议不要屏蔽 facebookexternalhit,以免分享链接无法显示预览;其他爬虫按业务需要决定,并观察广告审核和投放是否有变化。
参考来源
- Meta:Our Approach to Updating Our Commercial Terms of Service(2026-11-18)
- Meta:Commercial Terms
- Meta for Developers:Meta Web Crawlers
- Search Engine Journal:Meta Pauses Its Updated Business And Ad Terms Due Nov. 20(2026-11-10)
- Nieman Lab:Meta pulls down controversial terms of service
- Reuters:Meta pauses planned terms updates(2026-11-06)
以上为本文写作时(2026-11-20)查阅的公开页面;平台规则和数据会更新,请以官方页面为准。
七、结语
Meta 新条款暂停,意味着今天什么都不会自动改变,但现行条款里的爬取授权和 AI 生成内容责任条款依然有效。建议出海广告主借这个时间点检查 robots.txt 和 Advantage+ 自动功能设置,并关注 2027 年初的修订稿。需要 Facebook 广告开户与代投,欢迎联系熊猫出海,或查看 Facebook广告代理开户与代运营。
合规说明:熊猫出海只协助具备资质的主体通过平台官方流程开户、验证和投放,不出售或出租广告账户,也不提供绕过审核、伪装落地页(cloaking)或规避关联检测的方法。费用、时效与可投市场请向熊猫出海确认;平台政策以官方页面为准。本文不构成法律意见。
需要 Meta、Google、TikTok 广告开户与代投,或多语言独立站、GEO/AI 搜索优化?欢迎联系 熊猫出海(https://www.pandawm.com),Telegram:t.me/PANDA0134,或通过官网联系表单留言,我们按你的市场和预算给出方案。
微信咨询:szcwh99(扫码加好友)

引用本页:熊猫出海 pandawm.com《Meta网站爬虫与robots.txt怎么设置:商业条款更新暂停后,现行自助广告条款的爬取授权、Meta五种爬虫用途对照,以及Meta公布的三阶段修订流程与2027年初时间表(附robots.txt规则生成器)》,https://www.pandawm.com/blog/meta-commercial-terms-update-paused-november-20-robots-txt-2026.html

微信扫一扫打赏
支付宝扫一扫打赏
