За шесть суток краулер Meta скачал с моих сайтов 16 547 страниц. За десять месяцев он привёл с них ноль человек. Не мало, а ровно ноль: в отчёте по переходам нет ни одной строки.
На моём сервере 64 сайта с отдельными логами — мои собственные и клиентские, которые я веду по SEO и видимости в нейросетях. На прошлой неделе снял два отчёта со своей же инфраструктуры: какие ИИ-краулеры реально забирают страницы и какие ассистенты реально присылают людей. Списки почти не пересекаются, и это меняет то, как стоит считать этот канал.
Кто ходит по сайтам
Логи nginx, 64 сайта, полные сутки с 31 октября по 5 ноября 2026 года. Запросы по агентам:
- meta-externalagent — 16 547 запросов, 7 сайтов
- ClaudeBot — 1 401, 12 сайтов
- PerplexityBot — 1 078, 7 сайтов
- Applebot — 984, 15 сайтов
- OAI-SearchBot — 576, 22 сайта
- Amazonbot — 555, 11 сайтов
- Bytespider — 453, 17 сайтов
- Claude-SearchBot — 358, 8 сайтов
- GPTBot — 244, 13 сайтов
- Claude-User — 136, 8 сайтов
- ChatGPT-User — 131, 7 сайтов
- DuckAssistBot — 84, 6 сайтов
- CCBot — 67, 10 сайтов
Всего 22 614 запросов меньше чем за неделю. Почти три четверти из них сделала Meta. Шесть адресов в этом списке — мои собственные сайты; без них остаётся 19 887 запросов, картина та же.
Одна ловушка в самом подсчёте. Панель хостинга пишет каждый запрос в два файла: сайт-ssl.access.log и сайт-backend.access.log. Если грепнуть всё разом, любой агент удвоится. Первый мой прогон дал Meta 32 950 — ровно вдвое больше правды. Считайте по одному семейству логов и сверяйте сумму с числом строк за день.
Трёх агентов я искал и не нашёл ни разу: MistralAI-User, YandexAdditional и Google-Extended. Последний и не мог появиться. Google-Extended — это токен для robots.txt, а не краулер, ни один запрос его в себе не несёт. Пишу об этом потому, что регулярно вижу его в чужих аудитах в списке источников трафика.
А вот Bytespider, которого принято считать ушедшим, ходит исправно — 453 запроса на 17 сайтов. Искать его по слову «bot» бесполезно: он представляется поддельным мобильным браузером, строка выглядит как обычный iPhone или Android, и только в хвосте стоит его имя. Фильтр по подстроке «bot» в User-Agent его не поймает.
Кто приводит людей
Те же проекты, другой отчёт. Яндекс Метрика, 43 счётчика, переходы по имени хоста, 1 января — 6 ноября 2026:
- chatgpt.com — 518 визитов
- perplexity.ai — 483
- gemini.google.com — 114
- claude.ai — 55
- copilot.microsoft.com — 4
1 174 визита за десять месяцев, на десяти сайтах из сорока трёх. На ChatGPT и Perplexity пришлось 85 процентов. DeepSeek не прислал ни одного визита.
Meta не прислала никого.
Две таблицы рядом
Окна измерений разные, поэтому читайте это как порядок величин, а не как ставку. Краулеры — шесть суток. Переходы — десять месяцев.
Три агента OpenAI сделали за ту неделю 951 запрос и прислали за десять месяцев 518 визитов. Три агента Anthropic сделали 1 895 запросов и прислали 55 визитов. Perplexity сделала 1 078 и прислала 483. Meta сделала 16 547 и не прислала никого.
Читать сайт и рекомендовать сайт — разные занятия. Большую часть трафика краулеров, за который вы платите хостингом, забирают продукты, которые наружу не ссылаются вообще.
Цифра, которую не ставят на слайды
На самом крупном проекте — 816 970 визитов за период — ассистенты дали 507 визитов против 608 831 из поиска. Это 0,083 процента.
На втором по трафику: 640 визитов из ассистентов против 256 458 из поиска. Это 0,250 процента — втрое больше, чем у первого, и всё равно четверть процента.
Я весь год строил видимость в нейросетях для этих сайтов и сам говорю, что канал даёт десятую долю процента сессий. Обе вещи верны. Лучше услышать вторую от подрядчика сейчас, чем найти её в своей Метрике в марте.
Зачем тогда им заниматься
Потому что сессии — неправильная единица измерения для этого канала.
Когда покупатель просит ассистента назвать подрядчиков в вашей нише, ответ — не клик. Ответ — короткий список. Если вы в нём есть, визит придёт позже: брендовым запросом или напрямую, и припишется он ни вам, ни ассистенту. Я не умею измерить эту передачу чисто и не буду делать вид, что переходы из ассистентов покрывают весь эффект.
Зато я умею измерить две половины механики, и ломаются они порознь.
Читаемость. robots.txt либо пускает GPTBot, OAI-SearchBot, PerplexityBot и ClaudeBot, либо не пускает. Страницы либо отдают текст в HTML, либо прячут его за JavaScript, который эти агенты не выполняют. Карта сайта либо отражает сайт сегодняшний, либо врёт. На большинстве сайтов, которые я разбираю, из этих трёх вещей сломана одна, и логи показывают результат починки на следующий день.
Цитируемость. Ассистент забирает абзац, а не страницу. В этом абзаце ответ должен стоять целиком: число, условие, при котором оно верно, и дата. Цена внутри картинки невидима. Таблица сравнения, собранная на JavaScript, невидима. Страница на 2 000 слов, которая шесть абзацев ходит вокруг вопроса, проигрывает чужому блоку на 200 слов, где ответ просто написан.
Сайт может месяцами проходить первую проверку и валить вторую. Логи, набитые GPTBot, при пустом отчёте по переходам — ровно эта картина. Там и лежит почти вся настоящая работа.
Пять проверок на эту неделю
- Прогрепайте логи доступа по GPTBot, OAI-SearchBot, PerplexityBot и ClaudeBot. Пусто — проблема в robots.txt или на файрволе, а не в текстах. Считайте по одному семейству логов, иначе удвоите.
- Соберите в аналитике отчёт по переходам с разбивкой по хосту и поищите chatgpt.com и perplexity.ai. Большинство систем кладёт их в переходы по ссылкам, а не в поиск.
- Откройте три самые денежные коммерческие страницы с выключенным JavaScript. Всё, что исчезло, ассистент не видел.
- Спросите у ChatGPT и Perplexity то, что спросил бы ваш покупатель. Выпишите, кого они назовут. Делайте это из сессии без логина.
- Найдите страницу, где цена или главное число живёт в картинке, и перенесите его в текст.
Те же два отчёта по вашему сайту, включая разбор логов, я делаю на заказ: напишите, посмотрю.
В январе выложу обе таблицы снова, с двумя дополнительными месяцами по переходам. Если соотношения сдвинутся, скажу в какую сторону.