Боти OpenAI потроїли активність після запуску GPT-5 — тепер пошуковий краулер працює інтенсивніше
Дата публікації
01.05.2026
Після виходу GPT-5 у серпні 2025 року автоматизоване сканування сайтів ботами OpenAI зросло приблизно втричі. Причому пошуковий бот OAI-SearchBot, який збирає дані для відповідей ChatGPT у реальному часі, тепер генерує більше запитів, ніж навчальний GPTBot. До GPT-5 було навпаки. Такі результати показав аналіз понад 7 мільярдів записів серверних логів, проведений Крісом Лонгом із SEO-консалтингу Nectiv на базі даних платформи Botify за період із листопада 2024-го по березень 2026-го.
Три боти OpenAI — що з ними сталося
OpenAI використовує три основних боти для роботи з вебом. OAI-SearchBot сканує сторінки, коли ChatGPT шукає інформацію для відповіді на запит користувача. GPTBot збирає дані для тренування моделей. А ChatGPT-User спрацьовує, коли користувач прямо просить ChatGPT переглянути конкретну сторінку.
Після запуску GPT-5 активність OAI-SearchBot зросла приблизно в 3,5 раза — це додаткових 2,2 мільярда подій у датасеті Botify. Активність GPTBot зросла в 2,9 раза — це ще 1,8 мільярда подій у датасеті Botify.
А от ChatGPT-User пішов у протилежному напрямку — мінус 28% між груднем 2025-го і березнем 2026-го. Чому? Лонг пропонує два пояснення: або сесії ChatGPT стали рідше запускати сканування сторінок у реальному часі, або OpenAI будує власний індекс вебу і вже не потребує щоразу завантажувати сторінку наново — подібно до того, як Gemini спирається на індекс Google.
Пошук випередив навчання
До GPT-5 співвідношення пошукових і навчальних подій було приблизно 0,95 до 1. Після — змінилося на 1,14 до 1. ChatGPT тепер частіше звертається за відповідями до живого вебу, ніж покладається на знання, закладені під час тренування.
Ще в серпні 2025-го , що GPT-5 зробив SEO незамінним — саме тому, що модель почала більше покладатися на пошук, а не на пам’ять. І дані Botify підтверджують цю гіпотезу.
Які галузі сканують найактивніше
Після GPT-5 зростання розподілилося нерівномірно. OAI-SearchBot найбільше наростив активність на сайтах охорони здоров’я (+740%) і медіа та видавництв (+702%). Маркетплейси, розробники ПЗ та ритейл отримали +190–216%. Найменше — туристичні сайти: лише +30%.
Botify і Лонг припускають, що OpenAI по-різному обробляє різні типи запитів: новини та актуальні теми спрацьовують через живий пошук, а медичні та товарні запити частіше спираються на натреновані знання.
Навіть потроївшись, OpenAI — 4% від Google
Масштаб поки що несумірний. За останні 30 днів у датасеті Botify Googlebot зафіксував 18,2 мільярда подій, а боти OpenAI разом — 887 мільйонів, тобто приблизно 4%. Рік тому це було 1,38%. Розрив скорочується, але Google все ще сканує вебсторінки приблизно в 20 разів більше.
Що варто перевірити власникам сайтів
OAI-SearchBot і GPTBot — це різні боти з різним призначенням, і в robots.txt вони контролюються окремо. Хто блокує лише GPTBot (навчання), але залишає OAI-SearchBot відкритим — дозволяє ChatGPT цитувати свій сайт у пошукових відповідях. Хто блокує OAI-SearchBot — ризикує випасти з результатів пошуку ChatGPT взагалі.
Для вебсайтів, які хочуть залишатися видимими і для Google, і для ChatGPT, варто переглянути robots.txt і переконатися, що налаштування для кожного бота відповідають вашій стратегії — блокувати навчання, але дозволяти пошук, чи навпаки. Це вже частина внутрішньої оптимізації, яка одночасно працює і на класичний пошук, і ШІ-канал.
Комментарии