El sitio web tiene reglas de prohibición para Microsoft MSNBot.
https://blogs.bing.com/webmaster/2009/08/10/crawl-delay-and-the-bing-crawler-msnbot
Archivo robots.txt
Obtenga acceso a los datos sobre 1.537.329 sitios web que son Microsoft MSNBot Disallow Clientes. Sabemos de 428.704 sitios web en vivo usando Microsoft MSNBot Disallow y un adicional 1.108.625 sitios que utilizaron Microsoft MSNBot Disallow históricamente y 224.095 sitios web en Estados Unidos.
Obtenga una lista de 1.537.329 sitios web que utilizan Microsoft MSNBot Disallow que incluye información de ubicación, datos de alojamiento, detalles de contacto, 428.704 sitios web actualmente activos y un adicional 426.020 dominios que redireccionan a sitios de esta lista. 1.108.625 sitios que utilizaron esta tecnología anteriormentey 224.095 sitios web en Estados Unidos Actualmente usando Microsoft MSNBot Disallow.
Países
Financial
Group
Region