На сайте действуют правила запрета для бота Yahoo Slurp.
https://help.yahoo.com/kb/learn-submit-website-yahoo-robotstxt-directive-sln2213.html
Роботы.txt
Получите доступ к данным о 20 683 291 веб-сайты которые есть Yahoo Slurp Disallow Клиенты. Мы знаем о 10 485 295 живые сайты с использованием Yahoo Slurp Disallow и дополнительный 10 197 996 сайты, которые использовали Yahoo Slurp Disallow исторически и 488 562 веб-сайты в Соединенные Штаты.
Получить список 20 683 291 веб-сайты, использующие Yahoo Slurp Disallow которая включает в себя информацию о местоположении, данные о хостинге, контактные данные, 10 485 295 в настоящее время работают веб-сайты и дополнительный 285 259 домены, которые перенаправляют на сайты из этого списка. 10 197 996 сайты, которые использовали эту технологию ранееи 488 562 веб-сайты в Соединенные Штаты в настоящее время использую Yahoo Slurp Disallow.
Страны
Financial
Group
Region