El sitio web tiene reglas de prohibición para el bot Yahoo Slurp.
https://help.yahoo.com/kb/learn-submit-website-yahoo-robotstxt-directive-sln2213.html
Archivo robots.txt
Obtenga acceso a los datos sobre 20.683.291 sitios web que son Yahoo Slurp Disallow Clientes. Sabemos de 10.485.295 sitios web en vivo usando Yahoo Slurp Disallow y un adicional 10.197.996 sitios que utilizaron Yahoo Slurp Disallow históricamente y 488.562 sitios web en Estados Unidos.
Obtenga una lista de 20.683.291 sitios web que utilizan Yahoo Slurp Disallow que incluye información de ubicación, datos de alojamiento, detalles de contacto, 10.485.295 sitios web actualmente activos y un adicional 285.259 dominios que redireccionan a sitios de esta lista. 10.197.996 sitios que utilizaron esta tecnología anteriormentey 488.562 sitios web en Estados Unidos Actualmente usando Yahoo Slurp Disallow.
Países
Financial
Group
Region