На веб-сайте есть правила запрета для Applebot.
https://support.apple.com/en-us/HT204683
Роботы.txt
Получите доступ к данным на 399 126 веб-сайты AppleBot Disallow Клиенты. Мы знаем о 142 928 живые веб-сайты с использованием AppleBot Disallow и дополнительный 256 198 сайты, которые использовали AppleBot Disallow исторически и 91 863 веб-сайты в Соединенные Штаты.
Получить список 399 126 веб-сайты, использующие AppleBot Disallow который включает информацию о местоположении, данные хостинга, контактные да��ные, 142 928 действующие в настоящее время веб-сайты и дополнительный 62 727 домены, которые перенаправляют на сайты из этого списка. 256 198 сайты, которые использовали эту технологию ранееи 91 863 веб-сайты в Соединенные Штаты в настоящее время использую AppleBot Disallow.
Страны
Financial
Group
Region