На сайте действуют правила запрета для бота BuiltWith Technology Index.
https://builtwith.com/biup
Роботы.txt
Получите доступ к данным о 328 116 веб-сайты которые есть BuiltWithBot Disallow Клиенты. Мы знаем о 115 744 живые сайты с использованием BuiltWithBot Disallow и дополнительный 212 372 сайты, которые использовали BuiltWithBot Disallow исторически и 54 893 веб-сайты в Соединенные Штаты.
Получить список 328 116 веб-сайты, использующие BuiltWithBot Disallow которая включает в себя информацию о местоположении, данные о хостинге, контактные данные, 115 744 в настоящее время работают веб-сайты и дополнительный 55 380 домены, которые перенаправляют на сайты из этого списка. 212 372 сайты, которые использовали эту технологию ранееи 54 893 веб-сайты в Соединенные Штаты в настоящее время использую BuiltWithBot Disallow.
Страны
Financial
Group
Region