Some Robots Disallow 使用情况统计

Some Robots Disallow

阻止部分(但不是全部)机器人对网站进行索引。

https://robotstxt.org

Robots.txt

Some Robots Disallow 顾客

获取以下数据 59,067,545 网站 即 Some Robots Disallow 顾客. 我们知道 39,138,226 直播网站 使用 Some Robots Disallow 以及额外的 19,929,319 使用的网站 Some Robots Disallow 历史上 和 525,939 网站 美国.

获取列表 59,067,545 网站使用 Some Robots Disallow 其中包括位置信息、托管数据、联系方式、 39,138,226 当前直播网站 以及额外的 1,021,044 重定向至此列表中的站点的域名。 19,929,319 以前使用过该技术的网站和 525,939 网站 美国 目前正在使用 Some Robots Disallow.

网站总计

总直播
39,138,226
1,021,044 额外的网站重定向?.
美国 直播网站
525,939
现场和历史
59,067,545
顶部 1m
3.84%
38,359
顶部 100k
9.03%
9,034
顶部 10k
14.68%
1,468

国家

美国
525,939
德国
317,734
英国
178,987
俄罗斯
98,347
菲律宾
89,337
.co
58,859
澳大利亚
58,691
荷兰
46,587
西班牙
42,411
印度
40,526
加拿大
39,483
法国
36,248
.io
34,450
中国
31,574
科科斯群岛
27,778
巴西
26,631
意大利
24,219
。我
23,546
安圭拉
22,900
韩国
18,417
瑞士
15,957
日本
14,719
印度尼西亚
14,683
奥地利
14,314
PL 波兰
13,908
ZA 南非
11,207
BE 比利时
10,757
VG 英属维尔京群岛
9,055
TV 。电视
7,810
SE 瑞典
7,020
MX 墨西哥
6,239
WS 萨摩亚
5,752
TH 泰国
5,075
IR 伊朗
4,998
DK 丹麦
4,411
PT 葡萄牙
4,131
RO 罗马尼亚
4,059
CZ 捷克共和国
3,920
FI 芬兰
3,719
SK 斯洛伐克
3,333
TR 火鸡
3,179
VN 越南
2,919
AR 阿根廷
2,841
GR 希腊
2,606
MY 马来西亚
2,606
NO 挪威
2,594
TW 台湾
2,417
NZ 新西兰
2,205
CL 智利
2,130
PW 帕劳
2,114
SH 圣赫勒拿
2,103
GG 根西岛
2,024
HU 匈牙利
2,001
TO 汤加
1,976
EE 爱沙尼亚
1,869
UA 乌克兰
1,804
VC 圣文森特和格林纳丁斯
1,765
IM 马恩岛
1,734
SI 斯洛文尼亚
1,641
HK 香港
1,621
PK 巴基斯坦
1,605
SG 新加坡
1,521
AE 阿联酋
1,398
RE 团圆
1,333
SO 索马里
1,263
IS 冰岛
1,226
IE 爱尔兰
1,179
LV 拉脱维亚
986
BD 孟加拉国
916
CM 喀麦隆
908
AM 亚美尼亚
905
PE 秘鲁
866
LI 列支敦士登
823
NG 尼日利亚
801
RS 塞尔维亚
786
CX 圣诞岛
759
BG 保加利亚
697
IL 以色列
671
LU 卢森堡
669
FM 密克罗尼西亚
636
KE 肯尼亚
627
NU 纽埃
599
LT 立陶宛
574
BZ 伯利兹
560
EG 埃及
409
BY 白俄罗斯
407
SA 沙特阿拉伯
398
AL 阿尔巴尼亚
398
GE 乔治亚州
394
EC 厄瓜多尔
388
HR 克罗地亚
370
NP 尼泊尔
349
VE 委内瑞拉
331
KZ 哈萨克斯坦
313
AD 安道尔
312
QA 卡塔尔
310
MA 摩洛哥
287
LK 斯里兰卡
279
YT 马约特岛
272
CR 哥斯达黎加
263
GH 加纳
258
CY 塞浦路斯
250
MD 摩尔多瓦
238
UY 乌拉圭
211
ST 圣多美和普林西比
204
MT 马耳他
201
UG 乌干达
191
AG 安提瓜和巴布达
183
LB 黎巴嫩
175
DO 多明尼加共和国
174
MS 蒙特塞拉特
160
UZ 乌兹别克斯坦
156
MN 蒙古
152
PA 巴拿马
148
JO 约旦
139
TZ 坦桑尼亚
138
GT 危地马拉
128
PM 圣皮埃尔和密克隆
119
PR 波多黎各
116
DJ 吉布提
111
BO 玻利维亚
108
SC 塞舌尔
106
DZ 阿尔及利亚
100
MK 马其顿
96
KH 柬埔寨
91
TN 突尼斯
91
KW 科威特
89
TJ 塔吉克斯坦
87
AZ 阿塞拜疆
84
IQ 伊拉克
81
GP 瓜德罗普岛
79
GS 南乔治亚和南桑威奇群岛
76
CI 科特迪瓦
74
ET 埃塞俄比亚
74
BH 巴林
73
OM 阿曼
73
SV 萨尔瓦多
68
AF 阿富汗
66
BA 波斯尼亚和黑塞哥维那
65
NI 尼加拉瓜
63
PS 巴勒斯坦
62
HN 洪都拉斯
59
PY 巴拉圭
55
SX 圣马丁
52
NA 纳米比亚
51
NC 新喀里多尼亚
51
GL 格陵兰
48
LC 圣卢西亚
44
SN 塞内加尔
44
MU 毛里求斯
43
GD 格林纳达
40
ZM 赞比亚
40
MC 摩纳哥
39
BS 巴哈马
38
FO 法罗群岛
37
MQ 马提尼克岛
36
MV 马尔代夫
35
TG 多哥
34
JM 牙买加
33
VI 美属维尔京群岛
31
JE 球衣
30
KG 吉尔吉斯斯坦
28
TT 特立尼达和多巴哥
27
GF 法属圭亚那
25
BM 百慕大
24
BW 博茨瓦纳
24
TC 特克斯和凯科斯群岛
23
BB 巴巴多斯
21
TL 东帝汶
21
HT 海地
21
SY 叙利亚
20
KY 开曼群岛
17
MW 马拉维
16
FJ 斐济
13
BI 布隆迪
11
ML 马里
10
PG 巴布亚新几内亚
10
VU 瓦努阿图
9
PF 法属波利尼西亚
8
SM 圣马力诺
7
LY 利比亚
6
MH 马绍尔群岛
5

Financial

AMER AMER
659,266
ANZ ANZ
60,896
ANZUK ANZUK
239,883
APAC APAC
371,983
ASEAN3 ASEAN+3
180,988
ASEAN5 ASEAN+5
250,836
ASEAN6 ASEAN+6
282,410
FOURASIANTIGERS ASIAN TIGERS
53,133
AUKUS AUKUS
763,617
BASIC BASIC
109,938
BRIC BRIC
197,078
BRICS BRICS
208,285
CANZUK CANZUK
279,366
CIVETS CIVETS
91,256
CLMV CLMV
3,051
EMEA EMEA
910,161
FRIT FRIT
60,467
FRITES FRITES
102,878
IMEA IMEA
73,792
LATAM LATAM
99,849
LATCAR LATCAR
134,774
MART MART
131,613
MEA MEA
33,266
MENA MENA
12,891
MEP MEP
13,957
MIKTA MIKTA
101,209
MINT MINT
24,902
PIGS PIGS
73,367
SEA SEA
116,299
TIGERCUB Tiger Cub Economies
114,620
VISTA VISTA
34,829

Group

AFRICANUNION African Union
76,420
ARABLEAGUE Arab League
5,149
APEC Asia-Pacific Economic Cooperation
918,804
AER Assembly of European Regions
530,214
ACS Association of Caribbean State Members
69,191
ASEAN Association of Southeast Asian Nations
116,278
BIMSTEC Bay of Bengal Initiative for Multi-Sectoral Technical and Economic Cooperation
47,202
CARICOM Caribbean Community Members
3,009
CARIFTA Caribbean Free Trade Association
2,930
CAIS Central American Integration System
1,463
CEFTA Central European Free Trade Agreement Members
25,135
PARISCLUB Club de Paris
1,489,035
CIS Commonwealth of Independent States Members
100,565
COMMONWEALTH Commonwealth of Nations
360,300
CPLP Community of Portuguese Language Countries
31,041
COE Council of Europe
879,601
DAC Development Assistance Committee
1,399,026
EAC East African Community
1,173
EAP Eastern Partnership
553,646
INNERSIX EC Inner Six
436,214
OUTERSEVEN EC Outer Seven
227,414
ECO Economic Cooperation Organization
10,525
EAEU Eurasian Economic Union
100,000
EURONEST Euronest Parliamentary Assembly
553,155
EEA European Economic Area
554,457
EFTA European Free Trade Association
20,600
EU European Union
549,814
EUEEACH European Union, European Economic Area and Switzerland
570,414
FEAS Federation of Euro-Asian Stock Exchanges
21,555
G2 G2 Nations
557,513
G20 G20 Nations
1,450,062
G7 G7 Nations
1,137,329
3G Global Governance Group
150,921
G77 Group of 77
322,054
GUAM GUAM Organization for Democracy and Economic Development
2,520
GCC Gulf Cooperation Council
2,341
IBSA IBSA Dialogue Forum
78,364
ISA International Solar Alliance
1,107,028
IAO Interparliamentary Assembly on Orthodoxy
163,059
DACH Majority German-speaking states of Central Europe
348,005
NATO North Atlantic Treaty Organization
1,298,579
OECD Organisation for Economic Co-operation and Development
1,473,796
OECS Organisation of Eastern Caribbean States
34,271
OIC Organisation of Islamic Cooperation
36,591
OAS Organization of American States
667,833
OEI Organization of Ibero-American States
146,543
BSEC Organization of the Black Sea Economic Cooperation
112,711
OPEC Organization of the Petroleum Exporting Countries
8,238
TURKIC Organization of Turkic States
3,760
PACIFICALLIANCE Pacific Alliance
68,094
SCO Shanghai Cooperation Organisation
172,636
SAARC South Asian Association for Regional Cooperation
43,797
SADC Southern African Development Community
11,804
MERCOSUR Southern Common Market
29,738
NORAM Sovereign states and dependent territories of North America
607,942
USAN Union of South American Nations
547
V4 Visegrad Group
23,162

Region

AFRICA Africa
21,323
BALKANS Balkan States
37,449
BALTICS Baltic States
3,429
BENELUX Benelux Union
58,013
CENTRALAFRICA Central Africa
1,371
CENTRALAMERICA Central America
1,289
CENTRALASIA Central Asia
593
CENTRALEUROPE Central Europe
373,631
CHAPS CHAPS
37,476
EASTAFRICA East Africa
2,896
EASTASIA East Asia
68,903
EUROPE Europe
880,324
LEVANT Levant Narrow
4,496
MIDDLEEAST Middle East
12,352
NORDICS Nordics
19,061
CUSA North America
565,422
NORTHAFRICA Northern Africa
948
NORTHERNEUROPE Northern Europe
23,578
SCANDINAVIA Scandinavia
14,025
SOUTHAMERICA South America
92,703
SOUTHASIA South Asia
43,797
SOUTHERNAFRICA Southern Africa
11,288
SOUTHERNCONE Southern Cone
5,237
SOUTHERNEUROPE Southern Europe
100,806
SUBSAHARA Sub-Saharan Africa
19,132
WESTAFRICA Western Africa
1,329
WESTASIA Western Asia
13,735
WESTERNEUROPE Western Europe
623,606
浏览技术组