跳到正文
热点事件持续更新

Trakis发布网站屏蔽AI爬虫现状调研

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

2026年11月4日,Trakis Research 发布了对 13,938 个网站 robots.txt 文件的调查统计结果。该调研探讨了拦截 AI 训练的站点是否同时屏蔽回答类爬虫。数据显示,全网拦截 AI 训练爬虫的频率约为拦截回答与搜索爬虫的三倍;此外,在按名称屏蔽 OpenAI 旗下训练爬虫 GPTBot 的网站中,有 17.1% 同时也屏蔽了用于搜索和回答的 OAI-SearchBot。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

11月4日
  1. Hacker News · AI精选
    Trakis Research 调查 13,938 个网站:拦截 AI 训练的站点是否也屏蔽了回答爬虫

    Trakis Research 对 13,938 个网站的 robots.txt 统计显示,全网拦截 AI 训练爬虫的频率约为拦截回答与搜索爬虫的三倍,按名称屏蔽 GPTBot 的站点中有 17.1% 同时也屏蔽了 OAI-SearchBot。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。