Cloudflare Blog · 网络基础设施· Chris Tsoukaladelis·· 4 小时前AI 评分59
Cloudflare 推出已验证机器人持续问责系统,动态量化爬虫信任度
Continuous accountability for Verified bots
AI 导读
Cloudflare 推出针对已验证机器人(Verified bots)的持续问责评估系统,通过监测爬虫行为将其合规表现量化为动态信任区间。系统重点考察机器人是否持续遵守 robots.txt 设定的站点偏好,以及接收到 HTTP 429 限流反馈后是否主动减速或暂停请求。
来源:Cloudflare Blog · 网络基础设施 · blog.cloudflare.com