登录
·
免费注册
EN
DE
FR
ES
IT
Pусский
한국어
日本語
简体中文
عربي
工具
Web 技术趋势
关键字列表
电子商务产品清单
热门网站
技术投资者
LeadsEye™
API 访问
数据集
浏览器扩展
CRM 集成
特征
潜在客户生成
市场分析
销售情报
未来客户
全球数据覆盖
网络风险审计
另类金融数据
报告过滤
使用案例
所有功能
截屏演示
计划
顾客
资源
截屏演示
知识库
可导出字段
常问问题
关于我们
联系我们
关联公司
博客
抬头
家
趋势
Robots.txt
人工智能机器人
人工智能机器人 Web 使用情况分布
使用以下方式分发网站 AI 机器人 Robots.txt 技术
市场份额演变 · 人工智能机器人 Web 使用情况分布
顶级 人工智能机器人 Web 使用情况分布
技术
网站
Common Crawl Bot Disallow
34,220
GPTBot Disallow
32,915
Anthropic Claude Bot Disallow
32,620
AmazonBot Disallow
31,287
ByteDance Bytespider Disallow
30,855
Google Bard Disallow
29,509
Apple AI Bot Disallow
26,708
Alexa Bot Disallow
11,493
Facebook Bot Disallow
9,650
Perplexity
8,758
Cohere AI Disallow
6,762
Webz Omgili Disallow
5,529
YOU Disallow
4,894
Diffbot Disallow
4,461
Anthropic Claude User Bot Disallow
1,114
270,775 检测
的 AI 机器人 Robots.txt . 上次更新 28 10月 2025.
Common Crawl Bot Disallow
是目前该类别中使用最多的技术。
总计
前 100 万
顶部 1,000,000 按流量排名的网站
270,775
前 10 万
顶部 100,000 按流量排名的网站
37,489
前 10,000 名
顶部 10,000 按流量排名的网站
5,015
前 1000 名
顶部 1,000 按流量排名的网站
729
整个互联网
48,278,879
🇺🇸
美国
30,700,432
🇺🇸
美国
30,700,432
🇬🇧
英国
2,026,690
🇦🇺
澳大利亚
1,415,488
🇩🇪
德国
1,131,788
🇨🇦
加拿大
1,068,951
🇪🇸
西班牙
458,949
🇷🇺
俄罗斯
415,737
🇨🇭
瑞士
409,062
🇨🇴
.co
344,211
🇧🇷
巴西
334,108
🇫🇷
法国
320,952
🇮🇹
意大利
308,048
🇳🇱
荷兰
304,090
🇳🇿
新西兰
270,699
🇸🇪
瑞典
236,164
🇮🇳
印度
210,927
🇮🇩
印度尼西亚
204,574
🇵🇱
波兰
193,126
🇨🇳
中国
181,068
🇲🇪
。我
153,124
🇨🇨
科科斯群岛
150,806
🇩🇰
丹麦
150,672
🇳🇴
挪威
148,373
🇧🇪
比利时
137,411
🇮🇪
爱尔兰
137,021
🇮🇴
.io
118,832
🇲🇽
墨西哥
118,187
🇦🇹
奥地利
118,115
🇫🇮
芬兰
103,903
🇪🇺
欧洲联盟
102,278
🇯🇵
日本
88,726
🇿🇦
南非
81,916
🇹🇷
火鸡
80,514
🇨🇿
捷克共和国
75,502
🇦🇷
阿根廷
66,911
🇰🇷
韩国
66,046
🇵🇹
葡萄牙
64,308
🇦🇮
。人工智能
63,357
🇬🇷
希腊
53,074
🇸🇬
新加坡
52,783
🇸🇰
斯洛伐克
50,730
🇷🇴
罗马尼亚
47,474
🇲🇾
马来西亚
43,289
🇻🇳
越南
42,453
🇨🇱
智利
40,884
🇹🇭
泰国
39,278
🇭🇰
香港
33,551
🇦🇪
阿联酋
33,465
🇺🇦
乌克兰
33,383
🇭🇺
匈牙利
32,807
🇹🇼
台湾
27,480
🇮🇱
以色列
26,805
🇮🇷
伊朗
25,568
🇹🇻
。电视
24,601
🇵🇭
菲律宾
21,618
🇵🇰
巴基斯坦
19,084
🇱🇹
立陶宛
16,516
🇮🇸
冰岛
16,154
🇳🇬
尼日利亚
15,649
🇸🇮
斯洛文尼亚
14,422
🇧🇩
孟加拉国
14,303
🇱🇺
卢森堡
13,967
🇰🇪
肯尼亚
13,207
🇵🇪
秘鲁
12,885
🇨🇾
塞浦路斯
12,563
🇳🇵
尼泊尔
11,854
🇪🇪
爱沙尼亚
10,972
🇱🇻
拉脱维亚
10,319
🇨🇷
哥斯达黎加
10,224
🇮🇲
马恩岛
9,893
🇱🇰
斯里兰卡
9,851
🇪🇨
厄瓜多尔
9,795
🇧🇬
保加利亚
9,672
🇸🇦
沙特阿拉伯
9,121
🇭🇷
克罗地亚
8,807
🇲🇦
摩洛哥
8,089
🇬🇬
根西岛
7,183
🇱🇮
列支敦士登
6,753
🇵🇷
波多黎各
6,362
🇱🇦
老挝人民民主共和国
6,127
🇷🇸
塞尔维亚
6,094
🇸🇭
圣赫勒拿
5,834
🇵🇼
帕劳
5,712
🇳🇺
纽埃
5,471
🇦🇿
阿塞拜疆
5,381
🇬🇹
危地马拉
5,358
🇼🇸
萨摩亚
5,346
🇦🇱
阿尔巴尼亚
5,085
🇩🇴
多明尼加共和国
5,050
🇹🇴
汤加
4,897
🇲🇹
马耳他
4,869
🇱🇧
黎巴嫩
4,829
🇪🇬
埃及
4,753
🇻🇪
委内瑞拉
4,388
🇻🇨
圣文森特和格林纳丁斯
4,249
🇰🇿
哈萨克斯坦
4,230
🇺🇾
乌拉圭
4,212
🇹🇿
坦桑尼亚
3,897
🇬🇪
乔治亚州
3,592
🇺🇬
乌干达
3,417
🇨🇲
喀麦隆
3,340
🇵🇦
巴拿马
3,186
🇸🇽
圣马丁
3,182
🇺🇿
乌兹别克斯坦
2,953
🇲🇩
摩尔多瓦
2,891
🇦🇲
亚美尼亚
2,706
🇶🇦
卡塔尔
2,675
🇬🇭
加纳
2,634
🇨🇻
佛得角
2,570
🇹🇳
突尼斯
2,479
🇧🇿
伯利兹
2,429
🇷🇪
团圆
2,393
🇰🇼
科威特
2,384
🇫🇲
密克罗尼西亚
2,289
🇯🇴
约旦
2,228
🇿🇼
津巴布韦
2,225
🇰🇬
吉尔吉斯斯坦
2,113
🇵🇾
巴拉圭
2,078
🇲🇰
马其顿
2,013
🇯🇪
球衣
2,002
🇸🇴
索马里
1,985
🇧🇾
白俄罗斯
1,948
🇱🇾
利比亚
1,942
🇰🇭
柬埔寨
1,925
🇨🇽
圣诞岛
1,894
🇧🇲
百慕大
1,863
🇰🇾
开曼群岛
1,827
🇧🇸
巴哈马
1,787
🇲🇳
蒙古
1,777
🇦🇽
奥兰群岛
1,737
🇪🇹
埃塞俄比亚
1,709
🇲🇺
毛里求斯
1,682
🇭🇳
洪都拉斯
1,615
🇦🇬
安提瓜和巴布达
1,545
🇧🇦
波斯尼亚和黑塞哥维那
1,510
🇷🇼
卢旺达
1,494
🇸🇻
萨尔瓦多
1,472
🇧🇭
巴林
1,458
🇹🇹
特立尼达和多巴哥
1,454
🇵🇲
圣皮埃尔和密克隆
1,388
🇻🇮
美属维尔京群岛
1,341
🇦🇩
安道尔
1,324
🇮🇶
伊拉克
1,309
🇫🇴
法罗群岛
1,306
🇸🇹
圣多美和普林西比
1,284
🇲🇻
马尔代夫
1,281
🇴🇲
阿曼
1,262
🇧🇴
玻利维亚
1,204
🇧🇧
巴巴多斯
1,163
🇳🇦
纳米比亚
1,143
🇯🇲
牙买加
1,103
🇻🇺
瓦努阿图
1,012
🇿🇲
赞比亚
1,001
🇲🇲
缅甸
997
🇳🇮
尼加拉瓜
995
🇲🇨
摩纳哥
994
🇨🇮
科特迪瓦
918
🇲🇿
莫桑比克
901
🇱🇨
圣卢西亚
890
🇵🇸
巴勒斯坦
847
🇦🇫
阿富汗
837
🇸🇳
塞内加尔
768
🇧🇼
博茨瓦纳
765
🇹🇨
特克斯和凯科斯群岛
762
🇦🇴
安哥拉
760
🇫🇯
斐济
745
🇻🇬
英属维尔京群岛
707
🇩🇿
阿尔及利亚
697
🇦🇸
美属萨摩亚
687
🇨🇩
刚果
677
🇬🇱
格陵兰
632
🇸🇨
塞舌尔
600
🇬🇵
瓜德罗普岛
569
🇭🇹
海地
559
🇬🇩
格林纳达
549
🇲🇬
马达加斯加
540
🇲🇸
蒙特塞拉特
520
🇬🇮
直布罗陀
488
🇹🇫
法属南部领土
486
🇲🇱
马里
483
🇲🇼
马拉维
439
🇬🇸
南乔治亚和南桑威奇群岛
425
🇵🇬
巴布亚新几内亚
409
🇬🇾
圭亚那
377
🇸🇾
叙利亚
363
🇦🇼
阿鲁巴
352
🇲🇶
马提尼克岛
343
🇹🇬
多哥
332
🇲🇷
毛里塔尼亚
319
🇸🇷
苏里南
314
🇬🇺
关岛
314
🇸🇱
塞拉利昂
306
🇬🇲
冈比亚
304
🇾🇹
马约特岛
303
🇧🇯
贝宁
281
🇧🇳
文莱
246
🇨🇰
库克群岛
239
🇨🇺
古巴
225
🇱🇷
利比里亚
220
🇹🇯
塔吉克斯坦
218
🇸🇿
斯威士兰
180
🇸🇧
所罗门群岛
177
🇲🇴
澳门
176
🇧🇮
布隆迪
174
🇨🇼
库拉索
174
🇸🇩
苏丹
173
🇹🇱
东帝汶
167
🇱🇸
莱索托
157
🇩🇯
吉布提
155
🇼🇫
瓦利斯和富图纳
153
🇳🇨
新喀里多尼亚
145
🇧🇹
不丹
140
🇧🇫
布基纳法索
131
🇾🇪
也门
131
🇳🇪
尼日尔
123
🇵🇫
法属波利尼西亚
122
🇲🇵
北马里亚纳群岛
118
🇸🇯
斯瓦尔巴群岛和扬马延岛
103
🇬🇦
加蓬
102
🇸🇲
圣马力诺
94
🇩🇲
多米尼加
92
🇸🇸
南苏丹
84
🇰🇳
圣基茨和尼维斯
79
🇹🇲
土库曼斯坦
64
🇬🇫
法属圭亚那
59
🇳🇫
诺福克岛
55
🇺🇲
美国小岛屿
51
🇫🇰
福克兰群岛
48
🇰🇮
基里巴斯
46
🇭🇲
赫德岛和麦克唐纳群岛
46
🇹🇩
乍得
40
🇨🇬
刚果
38
🇧🇱
圣巴泰勒米
27
🇵🇳
皮特凯恩
26
🇬🇶
赤道几内亚
22
🇬🇼
几内亚比绍
21
🇻🇦
梵蒂冈城
19
🇬🇳
几内亚
19
🇲🇭
马绍尔群岛
18
🇳🇷
瑙鲁
18
🇧🇶
博内尔
18
🇪🇷
厄立特里亚
9
🇦🇶
南极洲
9
AI 机器人 Robots.txt 类别
全部 Robots.txt
人工智能机器人
从饼图中排除
Robots Disallow
Some Robots Disallow
一般机器人不允许规则。