3 из 6 ИИ-ботов могут открыть сайт.
Серьёзных проблем найдено: 2.
Предварительная оценка по подтверждённым результатам · попыток: 3
URL: https://www.afisha.ru/ · HTTP 200, 966 слов
URL: https://www.afisha.ru/ · HTTP 200, 966 слов · Запрос пользователя: robots.txt не определяет возможность загрузки
URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare
URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare
URL: https://www.afisha.ru/ · HTTP 200, 966 слов
URL: https://www.afisha.ru/ · HTTP 200, 0 слов · Защита: Cloudflare · Запрос пользователя: robots.txt не определяет возможность загрузки
URL: https://www.afisha.ru/ · Сайт не ответил вовремя
URL: https://www.afisha.ru/ · Сайт не ответил вовремя
URL: https://www.afisha.ru/ · Сайт не ответил вовремя
Передайте результаты тому, кто настраивает сайт: конкретные ответы сервера, ограничения и действия для перепроверки.
Наш запрос даже с подписью обычного браузера получил проверку Cloudflare, а Chromium страница открылась. Значит, защита смотрит не только на User-Agent, а на то, как устроен сам запрос. Большинство ИИ-агентов ходят обычными HTTP-запросами — им, скорее всего, тоже отказывают. Googlebot и YandexBot антиботы обычно пропускают по IP-адресам — это мы проверить не можем.
Как исправить. Проверьте настройки антибота или WAF: добавьте нужных ботов в исключения.
Браузеру главная открывается, а ИИ-агентам нет: Claude-User, Perplexity-User, Claude-SearchBot — упирается в проверку антибота (Cloudflare). При такой же настройке доступа агенты могут не получить содержимое. Реальный ответ сервиса зависит также от его IP и других источников.
Как исправить. Найдите правило, которое режет запросы по User-Agent: в WAF, антиботе, настройках хостинга или nginx — и добавьте исключение для нужных ботов.
Без JavaScript 966 слов, после рендера — 1872 (52%). Остальное ИИ-боты, скорее всего, не увидят.
Как исправить. Проверьте, какие блоки подгружаются скриптами, и отдавайте важный текст сразу в HTML.
Главная загружалась 15.2 с. У агентов, которые открывают страницу по запросу пользователя, короткие таймауты.
Как исправить. Ускорьте ответ сервера: кеширование, CDN, облегчение главной.
| Бот | robots.txt | Доступ к главной | HTTP-код |
|---|---|---|---|
| Поисковики | |||
GooglebotGoogle |
Разрешено |
Ошибка соединения |
— |
YandexBotЯндекс |
Разрешено |
Ошибка соединения |
— |
BingbotMicrosoft |
Разрешено |
Ошибка соединения |
— |
| ИИ-поиск | |||
OAI-SearchBotOpenAI |
Разрешено |
Видит страницу |
200 |
Claude-SearchBotAnthropic |
Разрешено |
Упирается в проверку антибота |
200 |
PerplexityBotPerplexity |
Разрешено |
Видит страницу |
200 |
| Агенты по запросу пользователя | |||
ChatGPT-UserOpenAI |
Разрешено |
Видит страницу |
200 |
Claude-UserAnthropic |
Разрешено |
Упирается в проверку антибота |
200 |
Perplexity-UserPerplexity |
Разрешено |
Упирается в проверку антибота |
200 |
| Обучение моделей · не влияет на балл | |||
GPTBotOpenAI |
Разрешено |
Видит страницу |
200 |
ClaudeBotAnthropic |
Разрешено |
Видит страницу |
200 |
CCBotCommon Crawl |
Разрешено |
Видит страницу |
200 |
BytespiderByteDance |
Разрешено |
Видит страницу |
200 |
Разрешено |
Видит страницу |
200 |
|
llms.txt, Markdown и schema.org показаны для справки. Их отсутствие не снижает балл и не доказывает отсутствие сайта в ответах.
User-agent: Yandex Disallow: /*/quests/*/map/ Disallow: /*/quests/*ajax Disallow: /*/quests/*/filter/*/*/ Disallow: /*/quests/*/filter/chislo- Disallow: /*/quests/*/filter/vozrast- Disallow: /*/quests/*/filter/data- Disallow: /*/quests/*/*sorting Disallow: /*/cinema/*/reservation/ Disallow: /*/restaurant/reservation/ Disallow: /*/igo/ Disallow: /*/sortbyrating/ Disallow: /*/sortbyalpha/ Disallow: /*/letter Disallow: /*/reset/ Disallow: /personalpage/ Disallow: /search/ Disallow: /Search/ Disallow: /noindex/ Disallow: /*/evening/ Disallow: /*/morningandday/ Disallow: /*/night/ Disallow: /*/reviews/friends/ Disallow: /*/reviews/all/ Disallow: /*/reviews/new/ Disallow: /*/review/friends/ Disallow: /*/review/all/ Disallow: /*/review/new/ Disallow: /*/restaurants/block-rendered/ Disallow: /*/photo/add/ Disallow: /*" Disallow: /robots/js Disallow: /out/ Disallow: /switch-mobile Disallow: /*/hotel/*/*/*/*/ Disallow: /*/park/*/*/*/*/ Disallow: /*/fitnesscenters/*/*/*/*/ Disallow: /*/beauty_salon/*/*/*/*/ Disallow: /*/sport/*/*/*/*/ Disallow: /*/shop/*/*/*/*/ Disallow: /*/club/*/*/*/*/ Disallow: /*/cinema/*/*/*/*/ Disallow: /*/theatre/*/*/*/*/ Disallow: /*/exhibitions/*/*/*/*/ Disallow: /*/museum/*/*/*/*/ Disallow: /*/schedule_cinema/*/*/*/*/ Disallow: /*/schedule_exhibition/*/*/*/*/ Disallow: /*/schedule_theatre/*/*/*/*/ Disallow: /*/schedule_concert/*/*/*/*/ Disallow: /*/concerthall/*/*/*/*/ Disallow: /*/movie/*/*/*/*/ Disallow: /*/movie/trailers/*/*/*/*/ Disallow: /*/other/*/*/*/ Disallow: /*?*view= Disallow: /*movie/*/strana- Disallow: /*movie/trailers/*/strana- Disallow: /psb/ Disallow: /*/psb/ Disallow: /egg/sdk-1.8.0.js Disallow: /auth/cb/ Disallow: /wdev* Clean-param: city&Date&CreationClassID&TagIDs&reset&page Clean-param: from_site&q&UserID&utm_source&utm_medium&utm_campaign Clean-param: o&from&ref&v&id&_escaped_fragment_&NeedFillMetro&search_str Clean-param: filter&ClassID&GeographyPlaceID&sort&yclyd Host: https://www.afisha.ru User-agent: Googlebot Disallow: /*/?date= Disallow: /*/quests/*/map/ Disallow: /*/quests/*ajax Disallow: /*/quests/*/filter/*/*/ Disallow: /*/quests/*/filter/chislo- Disallow: /*/quests/*/filter/vozrast- Disallow: /*/quests/*/filter/data- Disallow: /*/quests/*/*sorting Disallow: /*/cinema/*/reservation/ Disallow: /*/restaurant/reservation/ Disallow: /*/igo/ Disallow: /*/sortbyrating/ Disallow: /*/sortbyalpha/ Disallow: /*/letter Disallow: /*/reset/ Disallow: /personalpage/ Disallow: /search/ Disallow: /Search/ Disallow: /noindex/ Disallow: /*/schedule_cinema_product/*/*/*/*/*/ Disallow: /*/schedule_cinema_place/*/evening/ Disallow: /*/schedule_cinema_place/*/morningandday/ Disallow: /*/schedule_cinema_place/*/night/ Disallow: /*/hotel/*/*/*/*/ Disallow: /*/park/*/*/*/*/ Disallow: /*/fitnesscenters/*/*/*/*/ Disallow: /*/beauty_salon/*/*/*/*/ Disallow: /*/sport/*/*/*/*/ Disallow: /*/shop/*/*/*/*/ Disallow: /*/club/*/*/*/*/ Disallow: /*/cinema/*/*/*/*/ Disallow: /*/theatre/*/*/*/*/ Disallow: /*/exhibitions/*/*/*/*/ Disallow: /*/museum/*/*/*/*/ Disallow: /*/schedule_cinema/*/*/*/*/ Disallow: /*/schedule_exhibition/*/*/*/*/ Disallow: /*/schedule_theatre/*/*/*/*/ Disallow: /*/schedule_concert/*/*/*/*/ Disallow: /*/concerthall/*/*/*/*/ Disallow: /*/movie/*/*/*/*/ Disallow: /*/movie/trailers/*/*/*/*/ Disallow: /*/other/*/*/*/ Disallow: /*/reviews/friends/ Disallow: /*/reviews/all/ Disallow: /*/reviews/new/ Disallow: /*/review/friends/ Disallow: /*/review/all/ Disallow: /*/review/new/ Disallow: /*/restaurants/block-rendered/* Disallow: /*/photo/add/ Disallow: /*" Disallow: /robots/js Disallow: /review/ Disallow: /out/ Disallow: /switch-mobile Disallow: /*?*view= Disallow: /*movie/*/strana- Disallow: /*movie/trailers/*/strana- Disallow: /psb/ Disallow: /*/psb/ Disallow: /egg/sdk-1.8.0.js Disallow: /auth/cb/ Disallow: /wdev* User-agent: GoogleOther Disallow: /*/?date= Disallow: /*/quests/*/map/ Disallow: /*/quests/*ajax Disallow: /*/quests/*/filter/*/*/ Disallow: /*/quests/*/filter/chislo- Disallow: /*/quests/*/filter/vozrast- Disallow: /*/quests/*/filter/data- Disallow: /*/quests/*/*sorting Disallow: /*/cinema/*/reservation/ Disallow: /*/restaurant/reservation/ Disallow: /*/igo/ Disallow: /*/sortbyrating/ Disallow: /*/sortbyalpha/ Disallow: /*/letter Disallow: /*/reset/ Disallow: /personalpage/ Disallow: /search/ Disallow: /Search/ Disallow: /noindex/ Disallow: /*/schedule_cinema_product/*/*/*/*/*/ Disallow: /*/schedule_cinema_place/*/evening/ Disallow: /*/schedule_cinema_place/*/morningandday/ Disallow: /*/schedule_cinema_place/*/night/ Disallow: /*/hotel/*/*/*/*/ Disallow: /*/park/*/*/*/*/ Disallow: /*/fitnesscenters/*/*/*/*/ Disallow: /*/beauty_salon/*/*/*/*/ Disallow: /*/sport/*/*/*/*/ Disallow: /*/shop/*/*/*/*/ Disallow: /*/club/*/*/*/*/ Disallow: /*/cinema/*/*/*/*/ Disallow: /*/theatre/*/*/*/*/ Disallow: /*/exhibitions/*/*/*/*/ Disallow: /*/museum/*/*/*/*/ Disallow: /*/schedule_cinema/*/*/*/*/ Disallow: /*/schedule_exhibition/*/*/*/*/ Disallow: /*/schedule_theatre/*/*/*/*/ Disallow: /*/schedule_concert/*/*/*/*/ Disallow: /*/concerthall/*/*/*/*/ Disallow: /*/movie/*/*/*/*/ Disallow: /*/other/*/*/*/ Disallow: /*/reviews/friends/ Disallow: /*/reviews/all/ Disallow: /*/reviews/new/ Disallow: /*/review/friends/ Disallow: /*/review/all/ Disallow: /*/review/new/ Disallow: /*/restaurants/block-rendered/* Disallow: /*/photo/add/ Disallow: /*" Disallow: /robots/js Disallow: /review/ Disallow: /out/ Disallow: /switch-mobile Disallow: /*?*view= Disallow: /*movie/*/strana- Disallow: /psb/ Disallow: /*/psb/ Disallow: /egg/sdk-1.8.0.js Disallow: /auth/cb/ Disallow: /wdev* User-agent: * Disallow: /*/quests/*/map/ Disallow: /*/quests/*ajax Disallow: /*/quests/*/filter/*/*/ Disallow: /*/quests/*/filter/chislo- Disallow: /*/quests/*/filter/vozrast- Disallow: /*/quests/*/filter/data- Disallow: /*/quests/*/*sorting Disallow: /*/cinema/*/reservation/ Disallow: /*/restaurant/reservation/ Disallow: /*/igo/ Disallow: /*/sortbyrating/ Disallow: /*/sortbyalpha/ Disallow: /*/letter Disallow: /*/sortbyrating/ Disallow: /personalpage/ Disallow: /search/ Disallow: /Search/ Disallow: /noindex/ Disallow: /*/schedule_cinema_place/*/evening/ Disallow: /*/schedule_cinema_place/*/morningandday/ Disallow: /*/schedule_cinema_place/*/night/ Disallow: /*/reviews/friends/ Disallow: /*/reviews/all/ Disallow: /*/reviews/new/ Disallow: /*/review/friends/ Disallow: /*/review/all/ Disallow: /*/review/new/ Disallow: /*/restaurants/block-rendered/ Disallow: /*/photo/add/ Disallow: /*" Disallow: /robots/js Disallow: /out/ Disallow: /switch-mobile Disallow: /*/hotel/*/*/*/*/ Disallow: /*/park/*/*/*/*/ Disallow: /*/fitnesscenters/*/*/*/*/ Disallow: /*/beauty_salon/*/*/*/*/ Disallow: /*/sport/*/*/*/*/ Disallow: /*/shop/*/*/*/*/ Disallow: /*/club/*/*/*/*/ Disallow: /*/cinema/*/*/*/*/ Disallow: /*/theatre/*/*/*/*/ Disallow: /*/exhibitions/*/*/*/*/ Disallow: /*/museum/*/*/*/*/ Disallow: /*/schedule_cinema/*/*/*/*/ Disallow: /*/schedule_exhibition/*/*/*/*/ Disallow: /*/schedule_theatre/*/*/*/*/ Disallow: /*/schedule_concert/*/*/*/*/ Disallow: /*/concerthall/*/*/*/*/ Disallow: /*/movie/*/*/*/*/ Disallow: /*/movie/trailers/*/*/*/*/ Disallow: /*/other/*/*/*/ Disallow: /*?*view= Disallow: /*movie/*/strana- Disallow: /*movie/trailers/*/strana- Disallow: /psb/ Disallow: /*/psb/ Disallow: /egg/sdk-1.8.0.js Disallow: /docs/listim/ Disallow: /mcensk/cinema/kinoteatr-dlya-kinorynka-44787/* Disallow: /auth/cb/ Disallow: /wdev* Sitemap: https://www.afisha.ru/sitemap.xml
Собираем общую статистику по результатам проверок
Это ваш сайт? Вы можете убрать эту страницу или запретить наш сканер в robots.txt.