Яндекс · Поисковики

YandexBot: какие сайты его пускают

Основной робот Яндекса. Без него сайта нет ни в поиске, ни в ответах Нейро.

41сайт проверен

0%запрещают в robots.txt

32%блокируют на сервере

68%пускают

Как управлять доступом YandexBot

Запретить в robots.txt:

User-agent: YandexBot
Disallow: /

Явно разрешить:

User-agent: YandexBot
Allow: /

User-Agent: Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)

Сайт	robots.txt	Сервер	Балл
avito.ru	разрешено	капча	30
kari.com	разрешено	блокировка	48
gloria-jeans.ru	разрешено	проверка антибота	20
ekonika.ru	разрешено	проверка антибота	27
snowqueen.ru	разрешено	проверка антибота	24
finn-flare.ru	разрешено	ошибка	21
ostin.com	разрешено	проверка антибота	55
12storeez.com	разрешено	блокировка	20
lamoda.ru	разрешено	блокировка	24
dzen.ru	разрешено	урезанная страница	32
wildberries.ru	разрешено	блокировка	24
ozon.ru	разрешено	проверка антибота	27
nytimes.com	разрешено	проверка антибота	15

Сайт	robots.txt	Сервер	Балл
sberbank.ru	разрешено	пускает	41
pikabu.ru	разрешено	пускает	94
ingate.ru	разрешено	пускает	97
amdg.ru	разрешено	пускает	91
cian.ru	разрешено	пускает	35
sohoshop.ru	разрешено	пускает	84
askent.ru	разрешено	пускает	93
street-beat.ru	разрешено	пускает	97
brandshop.ru	разрешено	пускает	97
mascotte.ru	разрешено	пускает	94
oodji.com	разрешено	пускает	93
tvoe.ru	разрешено	пускает	99
ushatava.ru	разрешено	пускает	87
2moodstore.com	разрешено	пускает	84
rendez-vous.ru	разрешено	пускает	83
lime-shop.com	разрешено	пускает	90
befree.ru	разрешено	пускает	88
mos.ru	разрешено	пускает	71
hh.ru	разрешено	пускает	37
kinopoisk.ru	разрешено	пускает	85
tinkoff.ru	разрешено	пускает	41
gosuslugi.ru	разрешено	пускает	91
2gis.ru	разрешено	пускает	83
lenta.ru	разрешено	пускает	97
habr.com	разрешено	пускает	82
vc.ru	разрешено	пускает	83
sela.ru	разрешено	пускает	92
zarina.ru	разрешено	пускает	94