Проверка технической доступности afisha.ru
Дата: 2026-11-03T21:21:28.135Z
Страница: https://www.afisha.ru/

Задача: устранить препятствия для загрузки и чтения сайта поисковыми и ИИ-ботами.
Это проверка доступа с подписью бота, а не измерение появления сайта в ответах.

Claude: Доступ закрыт
Claude-SearchBot: URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare
Claude-User: URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare

Perplexity: Не все проверки прошли
Perplexity-User: URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare · Запрос пользователя: robots.txt не определяет возможность загрузки

Google Поиск: Не удалось проверить
Googlebot: URL: https://www.afisha.ru/ · Сайт не ответил вовремя

Яндекс: Не удалось проверить
YandexBot: URL: https://www.afisha.ru/ · Сайт не ответил вовремя

Bing: Не удалось проверить
Bingbot: URL: https://www.afisha.ru/ · Сайт не ответил вовремя

1. Сайт открывается только настоящему браузеру
Наш запрос даже с подписью обычного браузера получил проверку Cloudflare, а Chromium страница открылась. Значит, защита смотрит не только на User-Agent, а на то, как устроен сам запрос. Большинство ИИ-агентов ходят обычными HTTP-запросами — им, скорее всего, тоже отказывают. Googlebot и YandexBot антиботы обычно пропускают по IP-адресам — это мы проверить не можем.
Что сделать: Проверьте настройки антибота или WAF: добавьте нужных ботов в исключения.

2. ИИ-ассистенты не могут открыть сайт
Браузеру главная открывается, а ИИ-агентам нет: Claude-User, Perplexity-User, Claude-SearchBot — упирается в проверку антибота (Cloudflare). При такой же настройке доступа агенты могут не получить содержимое. Реальный ответ сервиса зависит также от его IP и других источников.
Что сделать: Найдите правило, которое режет запросы по User-Agent: в WAF, антиботе, настройках хостинга или nginx — и добавьте исключение для нужных ботов.

3. Часть контента видна только после JavaScript
Без JavaScript 966 слов, после рендера — 1872 (52%). Остальное ИИ-боты, скорее всего, не увидят.
Что сделать: Проверьте, какие блоки подгружаются скриптами, и отдавайте важный текст сразу в HTML.

4. Сайт отвечает медленно
Главная загружалась 15.2 с. У агентов, которые открывают страницу по запросу пользователя, короткие таймауты.
Что сделать: Ускорьте ответ сервера: кеширование, CDN, облегчение главной.

Приёмка: повторить проверку в AI Crawl после правок; сравнить те же URL, HTTP-ответы и правила robots.txt.
Не отключать защиту целиком: настраивать исключения для проверенных ботов по документации провайдера.