Robots Disallow Статистика использования

Robots Disallow

Роботы запрещают все директивы без каких-либо других вариантов.

https://robotstxt.org

Роботы.txt

Robots Disallow Клиенты

Мы знаем о 8 014 950 живые сайты с использованием Robots Disallow.

Мы знаем по крайней мере о 8 014 950 живые сайты с использованием Robots Disallow.

Всего по сайту

Всего в прямом эфире
8 014 950
2 726 994 дополнительные перенаправления веб-сайта?.
США Живые сайты
855 459
Оцененный
Вершина 1m
15,47%
154 655
Вершина 100k
29,4%
29 400
Вершина 10k
35,49%
3 549

Страны

Соединенные Штаты
855 458*
Россия
147 005*
Германия
102 259*
Великобритания
95 068*
Франция
60 925*
Нидерланды
45 101*
Бразилия
43 784*
Австралия
42 479*
Канада
40 418*
Италия
35 655*
Япония
33 319*
Индия
31 212*
Испания
30 182*
Польша
25 464*
Швейцария
23 758*
Китай
21 514*
Швеция
19 567*
Южная Корея
15 812*
.io
15 594*
Индонезия
15 308*
Бельгия
15 251*
Австрия
14 690*
Турция
14 071*
Дания
13 946*
FI Финляндия
12 514*
CZ Чешская Республика
12 411*
NO Норвегия
11 495*
UA Украина
11 392*
PT Португалия
10 545*
CO .co
9 411*
TW Тайвань
8 587*
SG Сингапур
8 335*
RO Румыния
8 026*
VN Вьетнам
7 671*
MX Мексика
7 499*
AR Аргентина
7 362*
ZA ЮАР
7 362*
HU Венгрия
7 350*
NZ Новая Зеландия
7 327*
TH Таиланд
5 759*
MY Малайзия
5 209*
IE Ирландия
4 992*
HK Гонконг
4 934*
CL Чили
4 877*
GR Греция
4 831*
ME .мне
4 522*
BG Болгария
4 385*
SK Словакия
4 247*
AE ОАЭ
4 133*
IL Израиль
3 652*
PH Филиппины
3 331*
CC Кокосовые острова
2 908*
LT Литва
2 851*
BD Бангладеш
2 816*
HR Хорватия
2 782*
EE Эстония
2 610*
AI Ангилья
2 530*
KZ Казахстан
2 507*
PK Пакистан
2 450*
TV .тв
2 438*
SI Словения
2 393*
SA Саудовская Аравия
2 393*
PE Перу
2 347*
LV Латвия
2 312*
LU Люксембург
2 026*
RS Сербия
2 026*
BY Беларусь
1 957*
CY Кипр
1 912*
IR Иран
1 797*
UZ Узбекистан
1 751*
KE Кения
1 465*
NG Нигерия
1 419*
MT Мальта
1 316*
UY Уругвай
1 225*
PW Палау
1 064*
EC Эквадор
1 041*
NP Непал
1 030*
EG Египет
938*
MA Марокко
938*
IS Исландия
927*
LK Шри-Ланка
915*
AM Армения
870*
GE Грузия
801*
TO Тонга
778*
MD Молдова
755*
GG Гернси
732*
CR Коста-Рика
709*
RE Воссоединение
664*
BO Боливия
641*
AZ Азербайджан
618*
MK Македония
606*
SH Святая Елена
572*
QA Катар
561*
KW Кувейт
538*
LI Лихтенштейн
515*
DO Доминиканская Республика
503*
PY Парагвай
492*
AL Албания
480*
VE Венесуэла
469*
KH Камбоджа
469*
JO Иордания
458*
TN Тунис
446*
WS Самоа
446*
TZ Танзания
446*
DZ Алжир
446*
GH Гана
400*
GT Гватемала
366*
BZ Белиз
354*
BA Босния и Герцеговина
354*
PA Панама
354*
FM Микронезия
343*
IM Остров Мэн
332*
NU Ниуэ
332*
KG Кыргызстан
320*
LB Ливан
320*
UG Уганда
309*
MU Маврикий
286*
OM Оман
286*
PR Пуэрто-Рико
274*
AF Афганистан
274*
SO Сомали
263*
SV Сальвадор
251*
ET Эфиопия
251*
IQ Ирак
251*
BS Багамы
251*
ST Сан-Томе и Принсипи
229*
ZW Зимбабве
229*
BH Бахрейн
229*
CX Остров Рождества
217*
MZ Мозамбик
217*
RW Руанда
217*
PS Палестина
217*
MN Монголия
217*
VC Сент-Винсент и Гренадины
206*
MM Мьянма
206*
CI Берег Слоновой Кости
206*
SC Сейшельские острова
194*
HN Гондурас
194*
NA Намибия
183*
AO Ангола
171*
MC Монако
160*
BM Бермудские острова
160*
NC Новая Каледония
160*
AG Антигуа и Барбуда
148*
ZM Замбия
148*
AD Андорра
148*
MS Монтсеррат
137*
TT Тринидад и Тобаго
137*
SN Сенегал
137*
BW Ботсвана
137*
GL Гренландия
125*
TJ Таджикистан
125*
NI Никарагуа
125*
CD Конго
114*
CM Камерун
114*
PM Сен-Пьер и Микелон
114*
TM Туркменистан
103*
GI Гибралтар
103*
JM Ямайка
103*
MG Мадагаскар
103*
BJ Бенин
103*
VI Виргинские острова США
91*
MV Мальдивы
91*
BT Бутан
91*
MO Макао
91*
TC Острова Теркс и Кайкос
91*
GP Гваделупа
80*
GS Южная Георгия и Южные Сандвичевы острова
80*
FO Фарерские острова
80*
BF Буркина-Фасо
80*
GM Гамбия
68*
SX Синт-Мартен
68*
FJ Фиджи
68*
GF Французская Гвиана
68*
SM Сан-Марино
68*
LS Лесото
68*
AW Аруба
57*
MQ Мартиника
57*
GY Гайана
57*
HT Гаити
57*
PG Папуа-Новая Гвинея
57*
BB Барбадос
57*
KY Каймановы острова
57*
TL Восточный Тимор
57*
MW Малави
57*
SL Сьерра-Леоне
57*
SB Соломоновы острова
57*

Financial

AMER AMER
963 190
ANZ ANZ
49 807
ANZUK ANZUK
144 875
APAC APAC
226 227
ASEAN3 ASEAN+3
116 972
ASEAN5 ASEAN+5
176 477
ASEAN6 ASEAN+6
197 992
FOURASIANTIGERS ASIAN TIGERS
50 597
AUKUS AUKUS
993 006
BASIC BASIC
103 873
BRIC BRIC
243 517
BRICS BRICS
250 879
CANZUK CANZUK
185 294
CIVETS CIVETS
47 826
CLMV CLMV
8 358
EMEA EMEA
800 601
FRIT FRIT
96 580
FRITES FRITES
126 762
IMEA IMEA
81 592
LATAM LATAM
75 271
LATCAR LATCAR
79 657
MART MART
197 385
MEA MEA
50 379
MENA MENA
33 708
MEP MEP
34 246
MIKTA MIKTA
95 171
MINT MINT
38 300
PIGS PIGS
81 214
SEA SEA
46 383
TIGERCUB Tiger Cub Economies
37 280
VISTA VISTA
51 776

Group

AFRICANUNION African Union
20 598
ARABLEAGUE Arab League
12 560
APEC Asia-Pacific Economic Cooperation
1 237 279
AER Assembly of European Regions
592 842
ACS Association of Caribbean State Members
14 495
ASEAN Association of Southeast Asian Nations
46 326
BIMSTEC Bay of Bengal Initiative for Multi-Sectoral Technical and Economic Cooperation
42 032
CARICOM Caribbean Community Members
1 671
CARIFTA Caribbean Free Trade Association
1 316
CAIS Central American Integration System
2 862
CEFTA Central European Free Trade Agreement Members
4 259
PARISCLUB Club de Paris
1 667 338
CIS Commonwealth of Independent States Members
155 913
COMMONWEALTH Commonwealth of Nations
255 699
CPLP Community of Portuguese Language Countries
55 028
COE Council of Europe
761 717
DAC Development Assistance Committee
1 550 423
EAC East African Community
2 622
EAP Eastern Partnership
466 950
INNERSIX EC Inner Six
261 218
OUTERSEVEN EC Outer Seven
189 072
ECO Economic Cooperation Organization
24 021
EAEU Eurasian Economic Union
152 661
EURONEST Euronest Parliamentary Assembly
464 374
EEA European Economic Area
463 493
EFTA European Free Trade Association
36 697
EU European Union
450 554
EUEEACH European Union, European Economic Area and Switzerland
487 251
FEAS Federation of Euro-Asian Stock Exchanges
49 291
G2 G2 Nations
876 972
G20 G20 Nations
1 578 910
G7 G7 Nations
1 223 104
3G Global Governance Group
89 618
G77 Group of 77
207 896
GUAM GUAM Organization for Democracy and Economic Development
13 568
GCC Gulf Cooperation Council
8 140
IBSA IBSA Dialogue Forum
82 359
ISA International Solar Alliance
1 353 564
IAO Interparliamentary Assembly on Orthodoxy
249 402
DACH Majority German-speaking states of Central Europe
140 708
NATO North Atlantic Treaty Organization
1 414 123
OECD Organisation for Economic Co-operation and Development
1 591 482
OECS Organisation of Eastern Caribbean States
3 309
OIC Organisation of Islamic Cooperation
63 512
OAS Organization of American States
972 133
OEI Organization of Ibero-American States
115 884
BSEC Organization of the Black Sea Economic Cooperation
193 240
OPEC Organization of the Petroleum Exporting Countries
11 656
TURKIC Organization of Turkic States
19 270
PACIFICALLIANCE Pacific Alliance
17 197
SCO Shanghai Cooperation Organisation
206 888
SAARC South Asian Association for Regional Cooperation
38 883
SADC Southern African Development Community
9 755
MERCOSUR Southern Common Market
52 864
NORAM Sovereign states and dependent territories of North America
911 150
USAN Union of South American Nations
1 213
V4 Visegrad Group
49 475

Region

AFRICA Africa
19 522
BALKANS Balkan States
39 994
BALTICS Baltic States
7 774
BENELUX Benelux Union
62 379
CENTRALAFRICA Central Africa
915
CENTRALAMERICA Central America
2 358
CENTRALASIA Central Asia
4 808
CENTRALEUROPE Central Europe
193 091
CHAPS CHAPS
64 165
EASTAFRICA East Africa
4 339
EASTASIA East Asia
84 477
EUROPE Europe
766 206
LEVANT Levant Narrow
20 655
MIDDLEEAST Middle East
31 796
NORDICS Nordics
58 692
CUSA North America
895 876
NORTHAFRICA Northern Africa
2 851
NORTHERNEUROPE Northern Europe
71 218
SCANDINAVIA Scandinavia
45 009
SOUTHAMERICA South America
65 310
SOUTHASIA South Asia
38 883
SOUTHERNAFRICA Southern Africa
7 785
SOUTHERNCONE Southern Cone
13 957
SOUTHERNEUROPE Southern Europe
91 530
SUBSAHARA Sub-Saharan Africa
16 407
WESTAFRICA Western Africa
2 667
WESTASIA Western Asia
34 086
WESTERNEUROPE Western Europe
364 897
Просмотр технологических групп