Bing частично игнорирует запрет индексации в robots.txt

Любопытно, что Bing’у частично пофигу, что там написано в роботсе. В robots.txt этого сайта полный запрет на индексацию всех страниц всеми поисковиками.

Да, нормально проиндексирована только одна страница, но всё же.

Оставьте комментарий