Как узнать наш запрос
AURA-Audit/1.0 (+https://aurageo.io/bot)AURA-Audit соблюдает robots.txt, ограничивает скорость и объём обхода и не входит в закрытые разделы. Доступность с похожим на Googlebot или OAI-SearchBot User-Agent проверяется отдельно как технический тест; такой тест не считается визитом настоящего робота провайдера.
Как управлять доступом
Для ограничения обхода добавьте правило для AURA-Audit в robots.txt. Не открывайте сервер по одному названию User-Agent: его может отправить любой клиент. Настоящие запросы провайдеров подтверждайте официальными IP-диапазонами или проверкой DNS.
User-agent: AURA-Audit
Disallow: /private/Что видно в отчётах
В отчёте сохраняются фактические URL, коды HTTP, найденный контент и время проверки. Обход AURA не означает индексацию в Google, Bing или ИИ. Статусы поисковиков и переходы показываются только при наличии соответствующего источника.
| Система и робот | Назначение и проверка | Первичный источник |
|---|---|---|
ChatGPTOAI-SearchBot · ChatGPT-User | OAI-SearchBot ищет страницы для поиска; ChatGPT-User открывает страницы по действию пользователя. GPTBot относится к обучению и учитывается отдельно.Сопоставление с опубликованными IP-диапазонами OpenAI. | ДокументацияПроверка / диапазоны 1Проверка / диапазоны 2Проверка / диапазоны 3 |
Google Search / AI Overviews / AI ModeGooglebot | Для поисковых AI-функций Google действуют обычные требования Search. Google-Extended — отдельный контроль использования данных в других системах Google.Официальные IP-диапазоны или reverse DNS с последующей проверкой адреса. | ДокументацияПроверка / диапазоны 1 |
PerplexityPerplexityBot · Perplexity-User | PerplexityBot собирает поисковые материалы; Perplexity-User открывает страницы в ответ на действия пользователя.Сопоставление с официальными IP-диапазонами Perplexity. | ДокументацияПроверка / диапазоны 1Проверка / диапазоны 2 |
ClaudeClaude-SearchBot · Claude-User · ClaudeBot | Поиск, открытие страниц по запросу пользователя и обучение — разные назначения и разные User-Agent.Название в User-Agent учитывается как неподтверждённое наблюдение, пока нет отдельного доказательства принадлежности запроса. | Документация |
Bing / Copilotbingbot | Обход Bing учитывается отдельно от появления в ответе Copilot. Сам визит поискового робота не подтверждает цитирование.Reverse DNS и проверка прямого разрешения имени на исходный адрес либо официальный инструмент проверки Bingbot. | ДокументацияПроверка / диапазоны 1 |
Переходы из ИИ
Правила классификации AURA сопоставляют домен источника с таблицей ниже. Это события переходов, а не частотность вопросов. Браузер или приложение могут не передать Referer — тогда источник остаётся direct/other. Уникальные люди не вычисляются.
| Источник | Домены Referer, распознаваемые AURA |
|---|---|
| ChatGPT | chatgpt.com, chat.openai.com |
| Gemini | gemini.google.com, bard.google.com |
| Claude | claude.ai |
| Perplexity | perplexity.ai, www.perplexity.ai |
| Grok | grok.com, www.grok.com |
| Copilot | copilot.microsoft.com, copilot.com |
| Meta AI | meta.ai |
| DeepSeek | chat.deepseek.com |
| Le Chat | chat.mistral.ai |
Таблица источников — правила AURA, а не обещание передачи заголовка со стороны платформ. Как работает Referer. Проверено: 17 октября 2026.
Открыть аналитику