★ 4
Meta 新条款被指可免费抓取新闻网站内容训练 AI
据 Nieman Lab 报道，Meta 将于 10 月 30 日生效的新商业条款，似乎授权其抓取与商业账户「关联」的网站内容，包括在线出版商的站点，用于开发、改进和训练 AI 产品。法律专家认为这可能让 Meta 主张其商业条款优先于 robots.txt 等屏蔽指令，Meta 则否认改变爬虫使…
The Verge AI16 天前
#爬虫
共 3 篇相关资讯，按重要度与时间排序，每 3 小时更新。
★ 3
DataDome报告：恶意机器人流量增速达人类9倍
DataDome 报告显示，2025 年 7 月至 2026 年 6 月间恶意自动化流量增长 124%，是人类流量增速的九倍，AI 流量增长超 82%。爬虫抓取增长 185%，AI 机器人攻击登录页的速率是此前的八倍。报告基于超 1 万亿次请求，指出多数网站缺乏防护，安全风险正深入账户与交易环节。
快公司40 天前
★ 1
SiteOne 开源 Rust 爬虫，可选接入 LLM 做内容审查
开发者发布 Rust 编写的站点爬虫 SiteOne，用于 SEO 与内容审计，并可选调用 LLM 对抓取内容做评审。属于面向网站运营的轻量工具，社区关注度较低。
Hacker News – LLM1 天前
这个主题的相关资产
相关公司Meta1