Cloudflare: 34,1% мирового трафика приходится на ботов, рост AI-краулеров в 8 раз

Согласно данным в реальном времени, собранным Cloudflare Radar 4 июня, 34,1% глобального HTTP-трафика приходится на ботов, а 65,9% — на живых пользователей; Cloudflare отмечает, что рост автоматизированного трафика происходит примерно в 8 раз быстрее, чем человеческого. AI-краулеры составляют около 22% всего бот-трафика и являются второй по величине категорией после краулеров поисковых систем.

Доля AI-краулеров: Meta-ExternalAgent обошёл GPTBot

（Источник：Cloudflare Radar）

Доли основных AI-краулеров в данных Cloudflare:

Meta-ExternalAgent：около 16,3%, уже обогнал GPTBot и занял первое место

ClaudeBot：около 11,6%

Applebot：за месяц рост на 140% — с примерно 2,97% до 7,15%; Cloudflare трактует это как сигнал того, что Apple Intelligence наращивает мощность по сбору данных

GPTBot：обогнан Meta-ExternalAgent（конкретная доля может колебаться）

Cloudflare поясняет, что цифры в разных отчётах могут отличаться; приведённые данные следует воспринимать как направление тенденций, а не как точный рейтинг.

Попытки входа и структура общего трафика

Данные Cloudflare показывают: при попытках входа на сайты 94% приходится на ботов. Мобильные устройства занимают 55,4% глобального трафика, а настольные — 44,6%. Cloudflare поясняет, что 34,1% бот-трафика не равны вредоносному: в него входят поисковые движки, инструменты веб-мониторинга, сервисы интеграции API, а также AI-краулеры и другие типы. Среди AI-краулеров обучающие (то есть собирающие данные для долгосрочного обучения моделей) составляют более 51,5%, а остальные — краулеры в реальном времени (для выдачи ответов на запросы пользователей).

Частые вопросы

Какие типы включает 34,1% бот-трафика в статистике Cloudflare?

Согласно данным Cloudflare Radar, 34,1% бот-трафика включает краулеры поисковых систем, AI-обучающие краулеры, инструменты веб-мониторинга, сервисы интеграции API и программы для вредоносных атак и т. п. На AI-краулеры приходится около 22% бот-трафика — это вторая по величине категория.

Что означает рост Applebot на 140% за один месяц?

Данные Cloudflare показывают, что за один месяц Applebot вырос с примерно 2,97% до 7,15%, то есть прирост составил 140%. Cloudflare трактует это как сигнал того, что Apple Intelligence усиливает сбор веб-данных.

Прогноз CEO Cloudflare Мэтью Принса на 2027 год — это подтверждённый факт?

Нет. «Бот-трафик превзойдёт живых пользователей к 2027 году» — это личный публичный прогноз Мэтью Принса; в оригинальном тексте Cloudflare прямо указано: «это прогноз, а не свершившийся факт». На данный момент подтверждены данные о доле бот-трафика 34,1% и то, что темп роста автоматизированного трафика примерно в 8 раз выше, чем у человеческого.