Robots Disallow 使用統計

Robots Disallow

他のオプションなしですべてのディレクティブを robots.disallow します。

https://robotstxt.org

ロボット.txt

Robots Disallow 顧客

私たちは知っている 8,014,950 ライブウェブサイト 使用して Robots Disallow.

少なくとも 8,014,950 ライブウェブサイト 使用して Robots Disallow.

サイト合計

トータルライブ
8,014,950
2,726,994 追加のウェブサイトリダイレクト?.
アメリカ合衆国 ライブサイト
855,459
推定
トップ 1m
15.47%
154,655
トップ 100k
29.4%
29,400
トップ 10k
35.49%
3,549

アメリカ合衆国
855,458*
ロシア
147,005*
ドイツ
102,259*
イギリス
95,068*
フランス
60,925*
オランダ
45,101*
ブラジル
43,784*
オーストラリア
42,479*
カナダ
40,418*
イタリア
35,655*
日本
33,319*
インド
31,212*
スペイン
30,182*
ポーランド
25,464*
スイス
23,758*
中国
21,514*
スウェーデン
19,567*
韓国
15,812*
.io
15,594*
インドネシア
15,308*
ベルギー
15,251*
オーストリア
14,690*
七面鳥
14,071*
デンマーク
13,946*
FI フィンランド
12,514*
CZ チェコ共和国
12,411*
NO ノルウェー
11,495*
UA ウクライナ
11,392*
PT ポルトガル
10,545*
CO .co
9,411*
TW 台湾
8,587*
SG シンガポール
8,335*
RO ルーマニア
8,026*
VN ベトナム
7,671*
MX メキシコ
7,499*
AR アルゼンチン
7,362*
ZA 南アフリカ
7,362*
HU ハンガリー
7,350*
NZ ニュージーランド
7,327*
TH タイ
5,759*
MY マレーシア
5,209*
IE アイルランド
4,992*
HK 香港
4,934*
CL チリ
4,877*
GR ギリシャ
4,831*
ME 。自分
4,522*
BG ブルガリア
4,385*
SK スロバキア
4,247*
AE アラブ首長国連邦
4,133*
IL イスラエル
3,652*
PH フィリピン
3,331*
CC ココス諸島
2,908*
LT リトアニア
2,851*
BD バングラデシュ
2,816*
HR クロアチア
2,782*
EE エストニア
2,610*
AI アンギラ
2,530*
KZ カザフスタン
2,507*
PK パキスタン
2,450*
TV 。テレビ
2,438*
SI スロベニア
2,393*
SA サウジアラビア
2,393*
PE ペルー
2,347*
LV ラトビア
2,312*
LU ルクセンブルク
2,026*
RS セルビア
2,026*
BY ベラルーシ
1,957*
CY キプロス
1,912*
IR イラン
1,797*
UZ ウズベキスタン
1,751*
KE ケニア
1,465*
NG ナイジェリア
1,419*
MT マルタ
1,316*
UY ウルグアイ
1,225*
PW パラオ
1,064*
EC エクアドル
1,041*
NP ネパール
1,030*
EG エジプト
938*
MA モロッコ
938*
IS アイスランド
927*
LK スリランカ
915*
AM アルメニア
870*
GE ジョージア
801*
TO トンガ
778*
MD モルドバ
755*
GG ガーンジー島
732*
CR コスタリカ
709*
RE 再会
664*
BO ボリビア
641*
AZ アゼルバイジャン
618*
MK マケドニア
606*
SH セントヘレナ
572*
QA カタール
561*
KW クウェート
538*
LI リヒテンシュタイン
515*
DO ドミニカ共和国
503*
PY パラグアイ
492*
AL アルバニア
480*
VE ベネズエラ
469*
KH カンボジア
469*
JO ヨルダン
458*
TN チュニジア
446*
WS サモア
446*
TZ タンザニア
446*
DZ アルジェリア
446*
GH ガーナ
400*
GT グアテマラ
366*
BZ ベリーズ
354*
BA ボスニア・ヘルツェゴビナ
354*
PA パナマ
354*
FM ミクロネシア
343*
IM マン島
332*
NU ニウエ
332*
KG キルギスタン
320*
LB レバノン
320*
UG ウガンダ
309*
MU モーリシャス
286*
OM オマーン
286*
PR プエルトリコ
274*
AF アフガニスタン
274*
SO ソマリア
263*
SV エルサルバドル
251*
ET エチオピア
251*
IQ イラク
251*
BS バハマ
251*
ST サントメ・プリンシペ
229*
ZW ジンバブエ
229*
BH バーレーン
229*
CX クリスマス島
217*
MZ モザンビーク
217*
RW ルワンダ
217*
PS パレスチナ
217*
MN モンゴル
217*
VC セントビンセントおよびグレナディーン諸島
206*
MM ミャンマー
206*
CI コートジボワール
206*
SC セイシェル
194*
HN ホンジュラス
194*
NA ナミビア
183*
AO アンゴラ
171*
MC モナコ
160*
BM バミューダ
160*
NC ニューカレドニア
160*
AG アンティグア・バーブーダ
148*
ZM ザンビア
148*
AD アンドラ
148*
MS モントセラト
137*
TT トリニダード・トバゴ
137*
SN セネガル
137*
BW ボツワナ
137*
GL グリーンランド
125*
TJ タジキスタン
125*
NI ニカラグア
125*
CD コンゴ
114*
CM カメルーン
114*
PM サンピエール島とミクロン島
114*
TM トルクメニスタン
103*
GI ジブラルタル
103*
JM ジャマイカ
103*
MG マダガスカル
103*
BJ ベナン
103*
VI アメリカ領ヴァージン諸島
91*
MV モルディブ
91*
BT ブータン
91*
MO マカオ
91*
TC タークス・カイコス諸島
91*
GP グアドループ
80*
GS サウスジョージア島およびサウスサンドウィッチ諸島
80*
FO フェロー諸島
80*
BF ブルキナファソ
80*
GM ガンビア
68*
SX シント・マールテン
68*
FJ フィジー
68*
GF フランス領ギアナ
68*
SM サンマリノ
68*
LS レソト
68*
AW アルバ
57*
MQ マルティニーク
57*
GY ガイアナ
57*
HT ハイチ
57*
PG パプアニューギニア
57*
BB バルバドス
57*
KY ケイマン諸島
57*
TL 東ティモール
57*
MW マラウイ
57*
SL シエラレオネ
57*
SB ソロモン諸島
57*

Financial

AMER AMER
963,190
ANZ ANZ
49,807
ANZUK ANZUK
144,875
APAC APAC
226,227
ASEAN3 ASEAN+3
116,972
ASEAN5 ASEAN+5
176,477
ASEAN6 ASEAN+6
197,992
FOURASIANTIGERS ASIAN TIGERS
50,597
AUKUS AUKUS
993,006
BASIC BASIC
103,873
BRIC BRIC
243,517
BRICS BRICS
250,879
CANZUK CANZUK
185,294
CIVETS CIVETS
47,826
CLMV CLMV
8,358
EMEA EMEA
800,601
FRIT FRIT
96,580
FRITES FRITES
126,762
IMEA IMEA
81,592
LATAM LATAM
75,271
LATCAR LATCAR
79,657
MART MART
197,385
MEA MEA
50,379
MENA MENA
33,708
MEP MEP
34,246
MIKTA MIKTA
95,171
MINT MINT
38,300
PIGS PIGS
81,214
SEA SEA
46,383
TIGERCUB Tiger Cub Economies
37,280
VISTA VISTA
51,776

Group

AFRICANUNION African Union
20,598
ARABLEAGUE Arab League
12,560
APEC Asia-Pacific Economic Cooperation
1,237,279
AER Assembly of European Regions
592,842
ACS Association of Caribbean State Members
14,495
ASEAN Association of Southeast Asian Nations
46,326
BIMSTEC Bay of Bengal Initiative for Multi-Sectoral Technical and Economic Cooperation
42,032
CARICOM Caribbean Community Members
1,671
CARIFTA Caribbean Free Trade Association
1,316
CAIS Central American Integration System
2,862
CEFTA Central European Free Trade Agreement Members
4,259
PARISCLUB Club de Paris
1,667,338
CIS Commonwealth of Independent States Members
155,913
COMMONWEALTH Commonwealth of Nations
255,699
CPLP Community of Portuguese Language Countries
55,028
COE Council of Europe
761,717
DAC Development Assistance Committee
1,550,423
EAC East African Community
2,622
EAP Eastern Partnership
466,950
INNERSIX EC Inner Six
261,218
OUTERSEVEN EC Outer Seven
189,072
ECO Economic Cooperation Organization
24,021
EAEU Eurasian Economic Union
152,661
EURONEST Euronest Parliamentary Assembly
464,374
EEA European Economic Area
463,493
EFTA European Free Trade Association
36,697
EU European Union
450,554
EUEEACH European Union, European Economic Area and Switzerland
487,251
FEAS Federation of Euro-Asian Stock Exchanges
49,291
G2 G2 Nations
876,972
G20 G20 Nations
1,578,910
G7 G7 Nations
1,223,104
3G Global Governance Group
89,618
G77 Group of 77
207,896
GUAM GUAM Organization for Democracy and Economic Development
13,568
GCC Gulf Cooperation Council
8,140
IBSA IBSA Dialogue Forum
82,359
ISA International Solar Alliance
1,353,564
IAO Interparliamentary Assembly on Orthodoxy
249,402
DACH Majority German-speaking states of Central Europe
140,708
NATO North Atlantic Treaty Organization
1,414,123
OECD Organisation for Economic Co-operation and Development
1,591,482
OECS Organisation of Eastern Caribbean States
3,309
OIC Organisation of Islamic Cooperation
63,512
OAS Organization of American States
972,133
OEI Organization of Ibero-American States
115,884
BSEC Organization of the Black Sea Economic Cooperation
193,240
OPEC Organization of the Petroleum Exporting Countries
11,656
TURKIC Organization of Turkic States
19,270
PACIFICALLIANCE Pacific Alliance
17,197
SCO Shanghai Cooperation Organisation
206,888
SAARC South Asian Association for Regional Cooperation
38,883
SADC Southern African Development Community
9,755
MERCOSUR Southern Common Market
52,864
NORAM Sovereign states and dependent territories of North America
911,150
USAN Union of South American Nations
1,213
V4 Visegrad Group
49,475

Region

AFRICA Africa
19,522
BALKANS Balkan States
39,994
BALTICS Baltic States
7,774
BENELUX Benelux Union
62,379
CENTRALAFRICA Central Africa
915
CENTRALAMERICA Central America
2,358
CENTRALASIA Central Asia
4,808
CENTRALEUROPE Central Europe
193,091
CHAPS CHAPS
64,165
EASTAFRICA East Africa
4,339
EASTASIA East Asia
84,477
EUROPE Europe
766,206
LEVANT Levant Narrow
20,655
MIDDLEEAST Middle East
31,796
NORDICS Nordics
58,692
CUSA North America
895,876
NORTHAFRICA Northern Africa
2,851
NORTHERNEUROPE Northern Europe
71,218
SCANDINAVIA Scandinavia
45,009
SOUTHAMERICA South America
65,310
SOUTHASIA South Asia
38,883
SOUTHERNAFRICA Southern Africa
7,785
SOUTHERNCONE Southern Cone
13,957
SOUTHERNEUROPE Southern Europe
91,530
SUBSAHARA Sub-Saharan Africa
16,407
WESTAFRICA Western Africa
2,667
WESTASIA Western Asia
34,086
WESTERNEUROPE Western Europe
364,897
テクノロジーグループを参照