El sitio web tiene reglas de prohibición para el bot ia_archiver de Alexa.
https://support.alexa.com/hc/en-us/articles/200450194-Alexa-s-Web-and-Site-Audit-Crawlers
Archivo robots.txt · Bot de IA
Obtenga acceso a los datos sobre 10.600.083 sitios web que son Alexa Bot Disallow Clientes. Sabemos de 5.217.515 sitios web en vivo usando Alexa Bot Disallow y un adicional 5.382.568 sitios que utilizaron Alexa Bot Disallow históricamente y 2.289.738 sitios web en Estados Unidos.
Obtenga una lista de 10.600.083 sitios web que utilizan Alexa Bot Disallow que incluye información de ubicación, datos de alojamiento, detalles de contacto, 5.217.515 sitios web actualmente activos y un adicional 552.421 dominios que redireccionan a sitios de esta lista. 5.382.568 sitios que utilizaron esta tecnología anteriormentey 2.289.738 sitios web en Estados Unidos Actualmente usando Alexa Bot Disallow.
Países
Financial
Group
Region