Боты OpenAI утроили активность после запуска GPT-5 — теперь поисковый краулер работает интенсивнее
Дата публикации
01.05.2026
После выхода GPT-5 в августе 2025 года автоматизированное сканирование сайтов ботами OpenAI выросло примерно втрое. Причём поисковый бот OAI-SearchBot, который собирает данные для ответов ChatGPT в реальном времени, теперь генерирует больше запросов, чем обучающий GPTBot. До GPT-5 было наоборот. Такие результаты показал анализ более 7 миллиардов записей серверных логов, проведённый Крисом Лонгом из SEO-консалтинга Nectiv на базе данных платформы Botify за период с ноября 2024-го по март 2026-го.
Три бота OpenAI — что с ними произошло
OpenAI использует три основных бота для работы с вебом. OAI-SearchBot сканирует страницы, когда ChatGPT ищет информацию для ответа на запрос пользователя. GPTBot собирает данные для тренировки моделей. А ChatGPT-User срабатывает, когда пользователь напрямую просит ChatGPT просмотреть конкретную страницу.
После запуска GPT-5 активность OAI-SearchBot выросла примерно в 3,5 раза — это дополнительных 2,2 миллиарда событий в датасете Botify. Активность GPTBot выросла в 2,9 раза — это ещё 1,8 миллиарда событий в датасете Botify.
А вот ChatGPT-User пошёл в противоположном направлении — минус 28% между декабрём 2025-го и мартом 2026-го. Почему? Лонг предлагает два объяснения: либо сессии ChatGPT стали реже запускать сканирование страниц в реальном времени, либо OpenAI строит собственный индекс веба и уже не нуждается в том, чтобы каждый раз загружать страницу заново — подобно тому, как Gemini опирается на индекс Google.
Поиск опередил обучение
До GPT-5 соотношение поисковых и обучающих событий составляло примерно 0,95 к 1. После — изменилось на 1,14 к 1. ChatGPT теперь чаще обращается за ответами к живому вебу, чем полагается на знания, заложенные во время тренировки.
Ещё в августе 2025-го , что GPT-5 сделал SEO незаменимым — именно потому, что модель начала больше полагаться на поиск, а не на память. И данные Botify подтверждают эту гипотезу.
Какие отрасли сканируют активнее всего
После GPT-5 рост распределился неравномерно. OAI-SearchBot больше всего нарастил активность на сайтах здравоохранения (+740%), а также медиа и издательств (+702%). Маркетплейсы, разработчики ПО и ритейл получили +190–216%. Меньше всего — туристические сайты: лишь +30%.
Botify и Лонг предполагают, что OpenAI по-разному обрабатывает разные типы запросов: новости и актуальные темы срабатывают через живой поиск, а медицинские и товарные запросы чаще опираются на натренированные знания.
Даже утроившись, OpenAI — 4% от Google
Масштаб пока несопоставим. За последние 30 дней в датасете Botify Googlebot зафиксировал 18,2 миллиарда событий, а боты OpenAI вместе — 887 миллионов, то есть примерно 4%. Год назад это было 1,38%. Разрыв сокращается, но Google по-прежнему сканирует веб-страницы примерно в 20 раз больше.
Что стоит проверить владельцам сайтов
OAI-SearchBot и GPTBot — это разные боты с разным назначением, и в robots.txt они контролируются отдельно. Кто блокирует только GPTBot (обучение), но оставляет OAI-SearchBot открытым — позволяет ChatGPT цитировать свой сайт в поисковых ответах. Кто блокирует OAI-SearchBot — рискует выпасть из результатов поиска ChatGPT вообще.
Для веб-сайтов, которые хотят оставаться видимыми и для Google, и для ChatGPT, стоит пересмотреть robots.txt и убедиться, что настройки для каждого бота соответствуют вашей стратегии — блокировать обучение, но разрешать поиск, или наоборот. Это уже часть внутренней оптимизации, которая одновременно работает и на классический поиск, и на ИИ-канал.
Комментарии