Блокирует сканирование Facebook.
https://www.facebook.com/
Роботы.txt · ИИ-бот
Получите доступ к данным о 4 134 409 веб-сайты которые есть Facebook Bot Disallow Клиенты. Мы знаем о 3 430 596 живые сайты с использованием Facebook Bot Disallow и дополнительный 703 813 сайты, которые использовали Facebook Bot Disallow исторически и 2 412 604 веб-сайты в Соединенные Штаты.
Получить список 4 134 409 веб-сайты, использующие Facebook Bot Disallow которая включает в себя информацию о местоположении, данные о хостинге, контактные данные, 3 430 596 в настоящее время работают веб-сайты и дополнительный 1 506 262 домены, которые перенаправляют на сайты из этого списка. 703 813 сайты, которые использовали эту технологию ранееи 2 412 604 веб-сайты в Соединенные Штаты в настоящее время использую Facebook Bot Disallow.
Страны
Financial
Group
Region