Как ИИ-агенты видят kari.com

Главные проблемы

1. Серьёзно

   ИИ-ассистенты не могут открыть сайт

   Браузеру главная открывается, а ИИ-агентам нет: ChatGPT-User, YandexAdditionalBot, OAI-SearchBot — заблокирован (ответ 403). Когда пользователь спросит ChatGPT, Claude или Perplexity о вашем сайте, они не смогут его прочитать.

   Как исправить. Найдите правило, которое режет запросы по User-Agent: в WAF, антиботе, настройках хостинга или nginx — и добавьте исключение для нужных ботов.

2. Важно

   Сайт пускает только тех, кто представился ботом

   Защита сайта отказывает обычным автоматическим клиентам и браузеру без интерфейса, но по подписи пропускает Googlebot, Claude-SearchBot, PerplexityBot, Claude-User, Perplexity-User. Остальным ботам — отказ.

   Как исправить. Проверьте правила защиты: каких ботов вы пропускаете по User-Agent и всех ли нужных включили.

3. Важно

   Сайт не пускает тех, кто только называет себя поисковиком

   Запросы с подписями поисковых роботов без их IP-адресов отклонены: YandexBot, Bingbot — заблокирован (ответ 403). Скорее всего, защита сверяет подлинность ботов по IP — тогда настоящие Googlebot и YandexBot проходят. Проверьте в Яндекс Вебмастере и Google Search Console, что ошибок обхода нет.

   Как исправить. Если в панелях вебмастера есть ошибки доступа, добавьте поисковых роботов в исключения защиты.

4. Мелочь

   Боты для обучения моделей заблокированы на уровне сервера

   GPTBot, ClaudeBot, CCBot, Bytespider, meta-externalagent — заблокирован (ответ 403). Если это сознательное решение — всё в порядке, на ответы ИИ-поиска это почти не влияет.

   Как исправить. Если блокировка случайная, проверьте правила антибота. Если нет — лучше дополнительно закрыть этих ботов в robots.txt: так правило будет явным.

5. Мелочь

   robots.txt не отдаётся сканеру

   Запрос /robots.txt получил ответ 403. Боты, которым robots.txt недоступен, обычно считают, что ограничений нет, — но и ваших правил они не узнают.

   Как исправить. Отдавайте robots.txt всем без проверок антибота.

Доступ по ботам

Мы зашли на главную под подписью (User-Agent) каждого бота и сравнили ответ с тем, что получает обычный браузер. Колонка robots.txt — что разрешают правила сайта.

Для сравнения обычный браузер получил: ответ 403.

JavaScript: что видит бот без браузера

GPTBot, ClaudeBot, PerplexityBot и большинство ИИ-агентов не выполняют JavaScript: они читают только HTML, который отдал сервер. Мы сравнили HTML, который получил Claude-SearchBot, со страницей после рендера в браузере.

Не удалось сравнить.

Разметка главной

Так главную видит Claude-SearchBot — без JavaScript.

Title

kari - интернет-магазин обуви и аксессуаров

Description

Сеть из 1200 магазинов обуви и аксессуаров для женщин, мужчин и детей. Товары для мам и малышей. Онлайн-заказ. Возможность оплаты частями. Адреса магазинов.

Язык

ru

Canonical

https://kari.com/

Schema.org

WebSite

Meta robots

не задано

Служебные файлы

robots.txt

нет ответ 403

Sitemap

нет ответ 403

Markdown для агентов

нет на запрос Markdown сайт отдаёт HTML

llms.txt

нет необязательный файл для языковых моделей

История проверок

Другие проверенные сайты

• 41 sberbank.ruИИ видят 1 из 12 · 30 окт
• 55 ostin.comИИ видят 5 из 12 · 30 окт
• 41 tinkoff.ruИИ видят 1 из 12 · 30 окт
• 37 hh.ruИИ видят 1 из 12 · 30 окт
• 94 pikabu.ruИИ видят 12 из 12 · 30 окт
• 97 ingate.ruИИ видят 12 из 12 · 30 окт
• 91 amdg.ruИИ видят 12 из 12 · 30 окт
• 30 avito.ruИИ видят 0 из 12 · 30 окт