Измерение AEO: как отслеживать трафик и упоминания от ИИ-систем

Q: Каких ИИ-краулеров мне следует искать в логах?

Основные краулеры: GPTBot от OpenAI, ClaudeBot от Anthropic, PerplexityBot, Google-Extended и Bytespider. Подсчитывайте их хиты для каждой страницы еженедельно. Если важная страница не получает активности от ИИ-ботов в течение нескольких недель, проверьте, разрешают ли ваши правила в robots.txt доступ этим агентам, так как одна случайная строка с `disallow` может незаметно их заблокировать.

Чтобы измерить AEO-трафик, вам нужно отслеживать три показателя: как часто ИИ-краулеры, такие как GPTBot и PerplexityBot, посещают ваши страницы; какой объем реферального трафика поступает с chatgpt.com и perplexity.ai; и как часто ИИ-ассистенты упоминают ваш бизнес в своих ответах. В совокупности эти данные показывают, читают ли вас ИИ-системы, направляют ли они к вам посетителей и рекомендуют ли вас.

Коротко: Измерение AEO основывается на трех источниках данных: логи сервера для отслеживания user-agent'ов ИИ-ботов, аналитика реферального трафика с доменов ИИ и ручная или автоматизированная проверка упоминаний бренда в ответах ИИ. Единой метрики не существует, поэтому вам нужно ежемесячно отслеживать динамику по всем трем направлениям.

Если вы хотите, чтобы мы настроили для вас отслеживание и отчетность наряду с работами по оптимизации, наша услуга по оптимизации для поисковых систем на базе ИИ (AEO) включает настройку мониторинга логов ботов, сегментов для реферального трафика от ИИ и чек-лист для отслеживания упоминаний бренда. Так вы будете видеть, как каждая ИИ-система взаимодействует с вашим контентом.

Почему AEO сложно измерить одним показателем

В классическом SEO есть трекеры позиций и данные о кликах, привязанные к ключевым словам. В AEO таких четких метрик нет, потому что «ответ» генерируется внутри ChatGPT или AI Overview, где вы не можете видеть показы так, как в результатах поиска. Пользователь может прочитать ваши факты в ответе ИИ, довериться им и совершить действие, даже не переходя на ваш сайт.

Это означает, что AEO измеряется методом триангуляции. Вы отслеживаете, посещают ли ИИ-боты ваши страницы, приходят ли с ИИ-платформ реферальные клики и появляется ли название вашей компании, когда вы задаете ассистентам вопросы, которые задают ваши клиенты. Каждый из этих сигналов частичен. Но, анализируя их вместе в динамике, вы поймете, приносит ли ваша работа по AEO результаты.

Как узнать, что ИИ-краулеры читают мой сайт?

Откройте логи доступа к вашему серверу и отфильтруйте поле user-agent по именам ИИ-краулеров. GPTBot, ClaudeBot, PerplexityBot и Google-Extended идентифицируют себя. Подсчет их хитов с течением времени показывает, какие страницы и как часто посещают ИИ-системы — это первое доказательство того, что ваш контент вообще попал в их поле зрения.

Простой способ отслеживания:

Отфильтруйте логи по GPTBot, ClaudeBot, PerplexityBot, Google-Extended и Bytespider.
Подсчитывайте количество хитов для каждого краулера еженедельно и отмечайте, какие URL они запрашивают.
Обращайте внимание на страницы, которые никогда не посещаются. Вероятно, они заблокированы или на них нет достаточного количества ссылок.
Убедитесь, что ваши правила в robots.txt разрешают доступ нужным краулерам, так как случайная строка с disallow может незаметно их заблокировать.

Если ключевая страница неделями не получает хитов от ИИ-ботов, в первую очередь исправьте проблему с доступностью. Страница, которую не читает краулер, не может быть процитирована.

Как отслеживать реферальный трафик с ИИ-платформ?

Создайте в системе аналитики сегмент, который будет собирать сессии, где реферером является домен ИИ: chatgpt.com, perplexity.ai, gemini.google.com или copilot.microsoft.com. Каждый клик по ссылке в ответе ИИ попадает в аналитику с таким реферером, поэтому сегмент подсчитает количество визитов от ИИ-систем и покажет их динамику.

Когда ИИ-система ссылается на ваш сайт в ответе и пользователь кликает по ссылке, этот визит появляется в вашей аналитике с указанием реферера. В Google Analytics или альтернативной системе, ориентированной на конфиденциальность, создайте сегмент для сессий с доменов ИИ. Следите за тенденцией, а не за данными за один день.

Домен-реферер	Источник
chatgpt.com	Цитаты и ссылки в ChatGPT
perplexity.ai	Источники в ответах Perplexity
gemini.google.com	Ответы Gemini
copilot.microsoft.com	Microsoft Copilot
Прямой, без реферера	Часто связан с ИИ, но сложно атрибутировать

Стоит честно признать: значительная часть визитов, инициированных ИИ, приходит без реферера или как прямой трафик, потому что пользователь увидел ваше название в ответе и позже ввел ваш URL вручную. Таким образом, количество рефералов недооценивает реальное влияние ИИ. Считайте количество переходов с доменов ИИ минимальным показателем и следите за необъяснимыми всплесками прямого трафика, которые совпадают по времени с вашей работой по AEO.

Отслеживание упоминаний бренда в ответах ИИ

Самый близкий аналог проверки позиций в AEO — это задавать ИИ-ассистентам вопросы, которые задают ваши клиенты, и фиксировать, появляется ли в ответах ваш бизнес. Этот процесс частично ручной, частично автоматизированный, и именно этот сигнал наиболее прямо связан с доходом, потому что рекомендация — это уже теплый лид.

Повторяемый процесс:

Составьте список из 15–30 вопросов, которые задают покупатели в вашей категории и городе.
Ежемесячно прогоняйте каждый вопрос через ChatGPT, Perplexity и Google AI Overviews.
Фиксируйте, упоминается ли ваш бизнес, на каком месте и какой источник цитирует модель.
Отмечайте конкурентов, которые появляются в ответах, чтобы знать, кого нужно вытеснить.
Отслеживайте долю вопросов, в ответах на которые вы появляетесь, и следите за ее динамикой.

Некоторые сторонние инструменты уже автоматизируют часть этого процесса, отправляя запросы ассистентам по расписанию и регистрируя упоминания. Если у вас нет бюджета на такие инструменты, даже таблица и час ручной проверки в месяц помогут выявить тенденцию, на основе которой можно действовать.

Объединение трех сигналов

Ни один график не отражает AEO полностью, поэтому создайте небольшой ежемесячный отчет, который объединяет все три показателя: количество посещений ИИ-ботов, динамику реферального и прямого трафика от ИИ, а также долю упоминаний вашего бренда в ответах ассистентов. Рассматривая их вместе, вы сможете ответить на главные вопросы: читают ли меня ИИ-системы, направляют ли они посетителей и рекомендуют ли они меня.

Установите периодичность полного обзора раз в месяц, а еженедельно быстро просматривайте логи ботов и реферальный трафик. Сначала цифры будут хаотичными. Но в течение квартала направление станет ясным, и вы сможете связать изменения с контентом и структурированными данными, которые вы внедрили.

FAQ

Как измерять AEO-трафик, если в ответах ИИ нет показов?

Вместо одного показателя используйте триангуляцию трех сигналов. Фильтруйте логи сервера по user-agent'ам ИИ-ботов, чтобы убедиться, что краулеры посещают ваши страницы; создайте сегмент в аналитике для рефералов с chatgpt.com и perplexity.ai, чтобы считать переходы; и ежемесячно задавайте ИИ-ассистентам вопросы ваших клиентов, чтобы фиксировать упоминания бренда. Анализируя эти три показателя вместе в динамике, вы поймете, приносит ли ваша работа по AEO результаты.

Каких ИИ-краулеров мне следует искать в логах?

Основные краулеры, на которые стоит обратить внимание: GPTBot от OpenAI, ClaudeBot от Anthropic, PerplexityBot, Google-Extended и Bytespider. Подсчитывайте их хиты для каждой страницы еженедельно. Если важная страница не получает активности от ИИ-ботов в течение нескольких недель, проверьте, разрешают ли ваши правила в robots.txt доступ этим агентам, так как одна случайная строка с `disallow` может заблокировать их без каких-либо ошибок.

Почему реферальный трафик от ИИ кажется таким маленьким?

Количество рефералов недооценивает влияние ИИ, потому что многие визиты, инициированные ИИ, не имеют реферера. Пользователь видит ваше название в ответе, а затем вводит ваш URL или ищет ваш бренд позже, поэтому визит засчитывается как прямой трафик. Считайте количество рефералов с доменов ИИ минимальным показателем и следите за всплесками прямого трафика, которые совпадают с вашими усилиями по AEO.

Могу ли я отслеживать, рекомендует ли ChatGPT мой бизнес?

Да, путем прямого тестирования. Составьте список вопросов, которые задают ваши клиенты, ежемесячно прогоняйте их через ChatGPT, Perplexity и Google AI Overviews и фиксируйте, упоминается ли ваша компания, на каком месте и какой источник был процитирован. Некоторые инструменты автоматизируют этот процесс, но даже таблица и час ручной проверки в месяц помогут выявить полезную тенденцию.

Как часто следует анализировать метрики AEO?

Проводите полный анализ ежемесячно, охватывая количество посещений ботов, динамику реферального и прямого трафика от ИИ, а также долю упоминаний бренда в ответах ассистентов. Добавьте быстрый еженедельный просмотр логов и рефералов, чтобы вовремя выявлять проблемы со сканированием. Ежемесячный анализ достаточно част, чтобы определить направление, не реагируя на ежедневный «шум», который естественен для этих сигналов.