ウェブサイトには、Alexa の ia_archiver ボットに対する禁止ルールがあります。
https://support.alexa.com/hc/en-us/articles/200450194-Alexa-s-Web-and-Site-Audit-Crawlers
ロボット.txt · AIボット
データにアクセスする 10,931,146 ウェブサイト それは Alexa Bot Disallow 顧客. 私たちは知っている 5,029,184 ライブウェブサイト 使用して Alexa Bot Disallow そして追加の 5,901,962 使用したサイト Alexa Bot Disallow 歴史的に そして 2,216,532 ウェブサイト アメリカ合衆国.
リストを取得する 10,931,146 使用中のウェブサイト Alexa Bot Disallow 位置情報、ホスティングデータ、連絡先の詳細などが含まれます。 5,029,184 現在公開中のウェブサイト そして追加の 530,072 このリスト内のサイトにリダイレクトするドメイン。 5,901,962 以前この技術を使用していたサイトそして 2,216,532 ウェブサイト アメリカ合衆国 現在使用中 Alexa Bot Disallow.
国
Financial
Group
Region