Отчёт · 30 октября 2026 г.

Как ИИ-агенты видят sohoshop.ru

Все 12 проверенных ИИ-ботов могут открыть главную sohoshop.ru и им это разрешено. Серьёзных проблем не нашли.

Проверена главная: sohoshop.ru Обновлено 30 октября в 22:56 Проверок: 2
84/100
Видимость для ИИ-агентов
Доступ для ботов
40/40
Правила robots.txt
20/20
Контент без JavaScript
20/20
Разметка
4/10
Служебные файлы
0/10
можно будет 31 октября в 04:56 Проверить другой сайт →

Главные проблемы

  1. Важно

    Не найдена карта сайта

    Мы не нашли рабочий sitemap (в robots.txt он не указан, /sitemap.xml не отвечает). Ботам сложнее находить страницы.

    Как исправить. Создайте sitemap.xml и укажите его в robots.txt строкой «Sitemap: …».

  2. Мелочь

    Нет meta description

    Нет краткого описания страницы — его часто используют как сниппет.

    Как исправить. Добавьте <meta name="description">.

  3. Мелочь

    Нет структурированных данных

    На главной нет разметки schema.org (JSON-LD). Она помогает ИИ понять, что это за организация и что она предлагает.

    Как исправить. Добавьте JSON-LD: Organization или LocalBusiness, для магазина — Product.

  4. Мелочь

    Нет robots.txt

    По адресу /robots.txt отдаётся HTML-страница вместо текстового файла.

    Как исправить. Создайте /robots.txt с правилами и ссылкой на sitemap.

  5. Мелочь

    Нет Markdown-версии для ИИ-агентов

    Агенты всё чаще просят страницы в Markdown (заголовок Accept: text/markdown): так им проще и дешевле читать текст без вёрстки. Сайт на такой запрос отдаёт HTML, файла /index.md тоже нет.

    Как исправить. Настройте отдачу Markdown по заголовку Accept: text/markdown на сервере или CDN — или хотя бы положите /index.md с текстом главной.

Ещё 1 замечание
  • Нет llms.txt. Файл llms.txt — новый и необязательный формат: краткое описание сайта для языковых моделей. Пока его поддерживают не все, но он дешёвый.

Доступ по ботам

Мы зашли на главную под подписью (User-Agent) каждого бота и сравнили ответ с тем, что получает обычный браузер. Колонка robots.txt — что разрешают правила сайта.

Ботrobots.txtДоступ к главнойОтвет сервера
Поисковики
GooglebotGoogle
Разрешенонет файла
Видит страницу
200
YandexBotЯндекс
Разрешенонет файла
Видит страницу
200
BingbotMicrosoft
Разрешенонет файла
Видит страницу
200
ИИ-поиск
Разрешенонет файла
Видит страницу
200
Разрешенонет файла
Видит страницу
200
Разрешенонет файла
Видит страницу
200
PerplexityBotPerplexity
Разрешенонет файла
Видит страницу
200
Агенты по запросу пользователя
Разрешенонет файла
Видит страницу
200
Claude-UserAnthropic
Разрешенонет файла
Видит страницу
200
Perplexity-UserPerplexity
Разрешенонет файла
Видит страницу
200
Обучение моделей
GPTBotOpenAI
Разрешенонет файла
Видит страницу
200
ClaudeBotAnthropic
Разрешенонет файла
Видит страницу
200
CCBotCommon Crawl
Разрешенонет файла
Видит страницу
200
BytespiderByteDance
Разрешенонет файла
Видит страницу
200
Разрешенонет файла
Видит страницу
200
Разрешенонет файла
нет своего робота
Разрешенонет файла
нет своего робота

Для сравнения обычный браузер получил: ответ 200, 16 слов.

JavaScript: что видит бот без браузера

GPTBot, ClaudeBot, PerplexityBot и большинство ИИ-агентов не выполняют JavaScript: они читают только HTML, который отдал сервер. Мы сравнили HTML, который получил YandexAdditionalBot, со страницей после рендера в браузере.

Без JavaScript16 слов
В браузере16 слов

Контент доступен без JavaScript.

Разметка главной

Так главную видит YandexAdditionalBot — без JavaScript.

Title
Наши магазины
Description
нет
Язык
ru
Canonical
нет
Schema.org
нет
Meta robots
не задано

Служебные файлы

robots.txt
нет ответ 200
Sitemap
нет ответ 200
Markdown для агентов
нет на запрос Markdown сайт отдаёт HTML
llms.txt
нет необязательный файл для языковых моделей

История проверок

ДатаБаллИИ-ботов видят
30 октября в 22:568412
15 октября в 23:518512

Как мы проверяли

Мы подставляем подпись бота, но не его IP-адрес. Поэтому отчёт показывает, как сайт видит агент без проверки IP. Если антибот пропускает ботов по IP-адресам (так часто делают для Googlebot и YandexBot), реальная картина для этих ботов может быть лучше. Точную картину дают только логи сервера.

Проверяли с сервера в России. Наш сканер представляется как AICrawl/1.0 (+https://ai-crawl.app/about) и соблюдает robots.txt. Подписи ИИ-ботов используются только для одного запроса к главной странице. Капчи и защиту мы не обходим, а только фиксируем. Подробнее о методике.

Другие проверенные сайты

Это ваш сайт? Вы можете убрать эту страницу или запретить наш сканер в robots.txt.