На веб-сайте есть правила запрета для Microsoft Bing Bot.
https://blogs.bing.com/webmaster/2012/05/03/to-crawl-or-not-to-crawl-that-is-bingbots-question/
Роботы.txt
Получите доступ к данным на 17 828 004 веб-сайты Microsoft BingBot Disallow Клиенты. Мы знаем о 5 500 496 живые веб-сайты с использованием Microsoft BingBot Disallow и дополнительный 12 327 508 сайты, которые использовали Microsoft BingBot Disallow исторически и 2 986 939 веб-сайты в Соединенные Штаты.
Получить список 17 828 004 веб-сайты, использующие Microsoft BingBot Disallow который включает информацию о местоположении, данные хостинга, контактные данные, 5 500 496 действующие в настоящее время веб-сайты и дополнительный 651 485 домены, которые перенаправляют на сайты из этого списка. 12 327 508 сайты, которые использовали эту технологию ранееи 2 986 939 веб-сайты в Соединенные Штаты в настоящее время использую Microsoft BingBot Disallow.
Страны
Financial
Group
Region