Robots Disallow Статистика использования

Robots Disallow

Роботы запрещают все директивы без каких-либо других вариантов.

https://robotstxt.org

Роботы.txt

Robots Disallow Клиенты

Мы знаем о 8 533 496 живые сайты с использованием Robots Disallow.

Мы знаем по крайней мере о 8 533 496 живые сайты с использованием Robots Disallow.

Всего по сайту

Всего в прямом эфире
8 533 496
2 750 610 дополнительные перенаправления веб-сайта?.
США Живые сайты
951 826
Оцененный
Вершина 1m
15,82%
158 185
Вершина 100k
29,66%
29 656
Вершина 10k
35,74%
3 574

Страны

Соединенные Штаты
951 826*
Россия
162 331*
Германия
110 069*
Великобритания
103 596*
Франция
66 110*
Нидерланды
49 043*
Бразилия
47 726*
Австралия
46 349*
Канада
43 874*
Италия
38 803*
Япония
36 242*
Индия
35 194*
Испания
32 866*
Польша
27 368*
Швейцария
25 624*
Китай
23 442*
Швеция
21 199*
Южная Корея
17 201*
.io
16 981*
Индонезия
16 786*
Бельгия
16 518*
Австрия
15 738*
Турция
15 579*
Дания
15 031*
CZ Чешская Республика
13 482*
FI Финляндия
13 446*
UA Украина
12 385*
NO Норвегия
12 324*
PT Португалия
11 605*
CO .co
10 788*
TW Тайвань
9 203*
SG Сингапур
9 094*
RO Румыния
8 899*
VN Вьетнам
8 570*
MX Мексика
8 216*
HU Венгрия
8 045*
AR Аргентина
8 033*
ZA ЮАР
7 972*
NZ Новая Зеландия
7 960*
TH Таиланд
6 290*
MY Малайзия
5 741*
ME .мне
5 558*
IE Ирландия
5 412*
GR Греция
5 412*
HK Гонконг
5 302*
CL Чили
5 302*
BG Болгария
4 766*
AE ОАЭ
4 583*
SK Словакия
4 559*
IL Израиль
3 925*
CC Кокосовые острова
3 669*
PH Филиппины
3 645*
HR Хорватия
3 181*
BD Бангладеш
3 145*
LT Литва
3 072*
EE Эстония
2 779*
TV .тв
2 779*
PK Пакистан
2 730*
KZ Казахстан
2 694*
AI Ангилья
2 657*
SI Словения
2 657*
SA Саудовская Аравия
2 584*
LV Латвия
2 572*
PE Перу
2 572*
RS Сербия
2 230*
LU Люксембург
2 218*
BY Беларусь
2 145*
IR Иран
2 133*
UZ Узбекистан
1 865*
KE Кения
1 560*
NG Нигерия
1 548*
CY Кипр
1 414*
MT Мальта
1 401*
UY Уругвай
1 353*
NP Непал
1 219*
PW Палау
1 158*
EC Эквадор
1 145*
EG Египет
1 060*
MA Марокко
1 048*
LK Шри-Ланка
1 024*
IS Исландия
987*
AM Армения
950*
GE Грузия
877*
TO Тонга
828*
MD Молдова
804*
GG Гернси
768*
CR Коста-Рика
768*
AZ Азербайджан
707*
BO Боливия
694*
RE Воссоединение
682*
MK Македония
670*
QA Катар
609*
SH Святая Елена
609*
KW Кувейт
585*
DO Доминиканская Республика
572*
WS Самоа
572*
LI Лихтенштейн
548*
AL Албания
548*
VE Венесуэла
524*
PY Парагвай
524*
DZ Алжир
512*
KH Камбоджа
499*
JO Иордания
487*
TN Тунис
487*
TZ Танзания
487*
GH Гана
451*
BA Босния и Герцеговина
402*
BZ Белиз
390*
PA Панама
390*
IM Остров Мэн
390*
GT Гватемала
390*
FM Микронезия
365*
UG Уганда
365*
NU Ниуэ
353*
KG Кыргызстан
341*
LB Ливан
341*
AF Афганистан
329*
MU Маврикий
304*
PR Пуэрто-Рико
304*
OM Оман
304*
SV Сальвадор
292*
SO Сомали
292*
ET Эфиопия
292*
BH Бахрейн
268*
IQ Ирак
268*
BS Багамы
268*
ZW Зимбабве
256*
ST Сан-Томе и Принсипи
243*
MM Мьянма
243*
CX Остров Рождества
231*
MZ Мозамбик
231*
VC Сент-Винсент и Гренадины
231*
RW Руанда
231*
PS Палестина
231*
MN Монголия
231*
CI Берег Слоновой Кости
231*
NA Намибия
207*
HN Гондурас
207*
SC Сейшельские острова
195*
MC Монако
182*
AO Ангола
182*
BM Бермудские острова
170*
NC Новая Каледония
170*
AG Антигуа и Барбуда
158*
ZM Замбия
158*
MS Монтсеррат
146*
TT Тринидад и Тобаго
146*
SN Сенегал
146*
AD Андорра
146*
BW Ботсвана
146*
GL Гренландия
134*
TJ Таджикистан
134*
NI Никарагуа
134*
CD Конго
121*
JM Ямайка
121*
CM Камерун
121*
PM Сен-Пьер и Микелон
121*
TM Туркменистан
109*
GI Гибралтар
109*
MV Мальдивы
109*
MG Мадагаскар
109*
BJ Бенин
109*
VI Виргинские острова США
97*
BT Бутан
97*
MO Макао
97*
TC Острова Теркс и Кайкос
97*
GP Гваделупа
85*
GS Южная Георгия и Южные Сандвичевы острова
85*
GF Французская Гвиана
85*
SX Синт-Мартен
85*
FJ Фиджи
85*
FO Фарерские острова
85*
BF Буркина-Фасо
85*
GM Гамбия
73*
GY Гайана
73*
SM Сан-Марино
73*
LS Лесото
73*
AW Аруба
60*
HT Гаити
60*
PG Папуа-Новая Гвинея
60*
BB Барбадос
60*
KY Каймановы острова
60*
TL Восточный Тимор
60*
MW Малави
60*
SL Сьерра-Леоне
60*
SB Соломоновы острова
60*

Financial

AMER AMER
1 069 076
ANZ ANZ
54 309
ANZUK ANZUK
157 906
APAC APAC
248 666
ASEAN3 ASEAN+3
127 795
ASEAN5 ASEAN+5
193 856
ASEAN6 ASEAN+6
217 299
FOURASIANTIGERS ASIAN TIGERS
55 041
AUKUS AUKUS
1 101 771
BASIC BASIC
114 336
BRIC BRIC
268 695
BRICS BRICS
276 668
CANZUK CANZUK
201 780
CIVETS CIVETS
52 627
CLMV CLMV
9 325
EMEA EMEA
871 160
FRIT FRIT
104 913
FRITES FRITES
137 779
IMEA IMEA
89 784
LATAM LATAM
82 104
LATCAR LATCAR
86 785
MART MART
216 921
MEA MEA
54 589
MENA MENA
36 559
MEP MEP
37 157
MIKTA MIKTA
104 133
MINT MINT
42 131
PIGS PIGS
88 687
SEA SEA
50 969
TIGERCUB Tiger Cub Economies
41 033
VISTA VISTA
56 942

Group

AFRICANUNION African Union
22 418
ARABLEAGUE Arab League
13 812
APEC Asia-Pacific Economic Cooperation
1 370 040
AER Assembly of European Regions
646 473
ACS Association of Caribbean State Members
15 847
ASEAN Association of Southeast Asian Nations
50 908
BIMSTEC Bay of Bengal Initiative for Multi-Sectoral Technical and Economic Cooperation
47 214
CARICOM Caribbean Community Members
1 828
CARIFTA Caribbean Free Trade Association
1 450
CAIS Central American Integration System
3 145
CEFTA Central European Free Trade Agreement Members
4 705
PARISCLUB Club de Paris
1 835 262
CIS Commonwealth of Independent States Members
171 974
COMMONWEALTH Commonwealth of Nations
279 228
CPLP Community of Portuguese Language Countries
60 075
COE Council of Europe
828 699
DAC Development Assistance Committee
1 705 577
EAC East African Community
2 840
EAP Eastern Partnership
505 548
INNERSIX EC Inner Six
282 763
OUTERSEVEN EC Outer Seven
205 120
ECO Economic Cooperation Organization
26 624
EAEU Eurasian Economic Union
168 463
EURONEST Euronest Parliamentary Assembly
502 696
EEA European Economic Area
501 537
EFTA European Free Trade Association
39 485
EU European Union
487 677
EUEEACH European Union, European Economic Area and Switzerland
527 162
FEAS Federation of Euro-Asian Stock Exchanges
53 748
G2 G2 Nations
975 268
G20 G20 Nations
1 741 942
G7 G7 Nations
1 350 523
3G Global Governance Group
97 635
G77 Group of 77
228 807
GUAM GUAM Organization for Democracy and Economic Development
14 775
GCC Gulf Cooperation Council
8 935
IBSA IBSA Dialogue Forum
90 893
ISA International Solar Alliance
1 495 446
IAO Interparliamentary Assembly on Orthodoxy
272 791
DACH Majority German-speaking states of Central Europe
151 432
NATO North Atlantic Treaty Organization
1 558 521
OECD Organisation for Economic Co-operation and Development
1 750 451
OECS Organisation of Eastern Caribbean States
3 498
OIC Organisation of Islamic Cooperation
70 084
OAS Organization of American States
1 078 889
OEI Organization of Ibero-American States
126 442
BSEC Organization of the Black Sea Economic Cooperation
213 264
OPEC Organization of the Petroleum Exporting Countries
12 958
TURKIC Organization of Turkic States
21 187
PACIFICALLIANCE Pacific Alliance
18 749
SCO Shanghai Cooperation Organisation
228 734
SAARC South Asian Association for Regional Cooperation
43 849
SADC Southern African Development Community
10 544
MERCOSUR Southern Common Market
57 637
NORAM Sovereign states and dependent territories of North America
1 012 292
USAN Union of South American Nations
1 340
V4 Visegrad Group
53 456

Region

AFRICA Africa
21 224
BALKANS Balkan States
44 398
BALTICS Baltic States
8 423
BENELUX Benelux Union
67 780
CENTRALAFRICA Central Africa
975
CENTRALAMERICA Central America
2 572
CENTRALASIA Central Asia
5 144
CENTRALEUROPE Central Europe
208 095
CHAPS CHAPS
69 194
EASTAFRICA East Africa
4 705
EASTASIA East Asia
91 722
EUROPE Europe
833 564
LEVANT Levant Narrow
22 016
MIDDLEEAST Middle East
34 426
NORDICS Nordics
63 245
CUSA North America
995 700
NORTHAFRICA Northern Africa
3 193
NORTHERNEUROPE Northern Europe
76 825
SCANDINAVIA Scandinavia
48 555
SOUTHAMERICA South America
71 193
SOUTHASIA South Asia
43 849
SOUTHERNAFRICA Southern Africa
8 435
SOUTHERNCONE Southern Cone
15 214
SOUTHERNEUROPE Southern Europe
100 158
SUBSAHARA Sub-Saharan Africa
17 737
WESTAFRICA Western Africa
2 913
WESTASIA Western Asia
36 962
WESTERNEUROPE Western Europe
395 210
Просмотр технологических групп