跳到正文
原文

ScrapeBench:评估 AI 智能体网页抓取的法律合规性

ScrapeBench: Evaluating Legal Compliance of AI Agents in Website Scraping

arXiv:越狱、提示注入、投毒与防御· arXiv:2611.11306· NeurIPS 2026· Joseph Marvin Imperial, Daniel Slate, Noam Kolt·本站收录· 9 天前· 原文发表日期未标评测
AI 导读

论文提出 ScrapeBench,作者称这是首个实证评估 AI 智能体网页抓取法律合规性的基准,测试智能体是否遵守服务条款(ToS)与 robots.txt。在 1626 个明确禁止抓取的热门网站上,多数闭源与开源智能体在被指示抓取时合规率不足 5%,即使主动查看适用条款后合规率仍然偏低。在 269 个不禁止抓取的网站上,智能体有时会拒绝本属合法的抓取,其中 Claude Opus 4.6 的过度拒答率达 98.5%。180 名参与者的人类基线实验显示,人类合规率与智能体相近,但过度拒答的比例高得多。

相关热点

1 个事件 · 2 条新闻提到

提到这篇论文的新闻

研究提出智能体抓取网站合规基准

阅读原文NeurIPS 2026