На сайте есть запрещающие правила для OpenAI GPTBot.
https://platform.openai.com/docs/gptbot
Роботы.txt · ИИ-бот
Получите доступ к данным о 6 082 981 веб-сайты которые есть GPTBot Disallow Клиенты. Мы знаем о 3 819 558 живые сайты с использованием GPTBot Disallow и дополнительный 2 263 423 сайты, которые использовали GPTBot Disallow исторически и 2 610 432 веб-сайты в Соединенные Штаты.
Получить список 6 082 981 веб-сайты, использующие GPTBot Disallow которая включает в себя информацию о местоположении, данные о хостинге, контактные данные, 3 819 558 в настоящее время работают веб-сайты и дополнительный 2 117 873 домены, которые перенаправляют на сайты из этого списка. 2 263 423 сайты, которые использовали эту технологию ранееи 2 610 432 веб-сайты в Соединенные Штаты в настоящее время использую GPTBot Disallow.
Страны
Financial
Group
Region