热点事件持续更新
Trakis发布网站屏蔽AI爬虫现状调研
1 篇报道1 个报道来源2 小时前更新
先了解这件事
AI 综述
2026年11月4日,Trakis Research 发布了对 13,938 个网站 robots.txt 文件的调查统计结果。该调研探讨了拦截 AI 训练的站点是否同时屏蔽回答类爬虫。数据显示,全网拦截 AI 训练爬虫的频率约为拦截回答与搜索爬虫的三倍;此外,在按名称屏蔽 OpenAI 旗下训练爬虫 GPTBot 的网站中,有 17.1% 同时也屏蔽了用于搜索和回答的 OAI-SearchBot。
AI 根据报道生成 · 2 小时前更新
最新进展11月4日 21:16
Trakis调查显示全网拦截AI训练爬虫频率约为搜索爬虫的三倍。报道时间线
沿着报道,了解事件的不同侧面。
11月4日
- Hacker News · AI精选Trakis Research 调查 13,938 个网站:拦截 AI 训练的站点是否也屏蔽了回答爬虫
Trakis Research 对 13,938 个网站的 robots.txt 统计显示,全网拦截 AI 训练爬虫的频率约为拦截回答与搜索爬虫的三倍,按名称屏蔽 GPTBot 的站点中有 17.1% 同时也屏蔽了 OAI-SearchBot。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。