法律专家警告 Meta 的新条款仍授予广泛的抓取权限

摘要

【HN用户评论摘要】 still have the ability to disable the crawler via robots.txt flagsNever rely on robots.txt. Configure it, but do not rely on it. A bot will do what a bot can do. Their bots are trivial to s...

the still robots txt rely not bot and RST from

2026-10-18 1 阅读约1分钟阅读 DeepLogin

【HN用户评论摘要】仍然可以通过 robots.txt 标志禁用爬虫程序永远不要依赖 robots.txt。配置它，但不要依赖它。机器人会做机器人能做的事情。他们的机器人很容易发现如此关闭的连接，如果默默地关闭套接字并禁止来自网络守护程序的第一个 RST 和来自操作系统的第二个 RST，那就更好了。只需将公司重命名为 Meta Law 或 Zuckerberg & Associates 人文专家警告寡头们，“不好”的消息永远不会有。原始链接：https://www.niemanlab.org/2026/10/legal-experts-warn-metas-new-terms-still-grant-broad-scraping-permissions-despite-language-changes/

订阅66必读