登录 · 免费注册

EN DE FR ES IT Pусский 한국어 日本語简体中文 عربي

人工智能机器人 Web 使用情况分布进入前 100 万个网站

使用以下方式分发网站 AI 机器人 Robots.txt 技术

市场份额演变 · 人工智能机器人 Web 使用情况分布进入前 100 万个网站

顶级人工智能机器人 Web 使用情况分布进入前 100 万个网站

	技术	网站
	GPTBot Disallow	28,492
	Common Crawl Bot Disallow	22,999
	Anthropic Claude Bot Disallow	21,283
	AmazonBot Disallow	18,233
	Google Bard Disallow	17,362
	ByteDance Bytespider Disallow	15,860
	Apple AI Bot Disallow	13,418
	Alexa Bot Disallow	11,493
	Facebook Bot Disallow	10,366
	Perplexity	9,839
	Cohere AI Disallow	7,967
	Webz Omgili Disallow	6,820
	Diffbot Disallow	5,191
	YOU Disallow	4,588
	Anthropic Claude User Bot Disallow	667

194,578 检测

的 AI 机器人 Robots.txt 进入前 100 万个网站. 上次更新 11 9月 2025.

GPTBot Disallow 是目前该类别中使用最多的技术。

总计

前 100 万 顶部 1,000,000 按流量排名的网站: 194,578
前 10 万 顶部 100,000 按流量排名的网站: 39,419
前 10,000 名 顶部 10,000 按流量排名的网站: 6,614
前 1000 名 顶部 1,000 按流量排名的网站: 765
整个互联网: 41,953,503
🇺🇸 美国: 27,191,582
🇺🇸 美国: 27,191,582
🇬🇧 英国: 1,892,231
🇦🇺 澳大利亚: 1,337,693
🇩🇪 德国: 1,128,056
🇨🇦 加拿大: 998,992
🇪🇸 西班牙: 435,388
🇨🇭 瑞士: 390,949
🇷🇺 俄罗斯: 367,833
🇮🇹 意大利: 303,236
🇨🇴 .co: 288,902
🇫🇷 法国: 287,690
🇳🇱 荷兰: 280,367
🇧🇷 巴西: 260,953
🇳🇿 新西兰: 253,161
🇸🇪 瑞典: 222,042
🇵🇱 波兰: 151,102
🇨🇳 中国: 147,515
🇩🇰 丹麦: 142,352
🇳🇴 挪威: 141,574
🇮🇳 印度: 141,136
🇮🇪 爱尔兰: 129,122
🇧🇪 比利时: 128,651
🇲🇪 。我: 126,058
🇮🇩 印度尼西亚: 112,148
🇦🇹 奥地利: 111,381
🇨🇨 科科斯群岛: 105,714
🇲🇽 墨西哥: 101,812
🇫🇮 芬兰: 97,564
🇯🇵 日本: 90,546
🇪🇺 欧洲联盟: 86,268
🇮🇴 .io: 81,870
🇨🇿 捷克共和国: 68,963
🇿🇦 南非: 68,574
🇰🇷 韩国: 60,653
🇵🇹 葡萄牙: 54,099
🇦🇷 阿根廷: 51,337
🇸🇬 新加坡: 47,919
🇸🇰 斯洛伐克: 47,895
🇹🇷 火鸡: 43,187
🇬🇷 希腊: 41,609
🇦🇮 安圭拉: 40,965
🇷🇴 罗马尼亚: 38,471
🇭🇺 匈牙利: 38,141
🇭🇰 香港: 30,272
🇨🇱 智利: 28,889
🇹🇭 泰国: 27,821
🇲🇾 马来西亚: 27,119
🇦🇪 阿联酋: 25,750
🇻🇳 越南: 23,168
🇹🇼 台湾: 22,066
🇹🇻 。电视: 21,614
🇺🇦 乌克兰: 19,720
🇵🇭 菲律宾: 18,013
🇮🇱 以色列: 16,978
🇮🇸 冰岛: 14,205
🇱🇹 立陶宛: 13,369
🇸🇮 斯洛文尼亚: 13,265
🇱🇺 卢森堡: 12,431
🇮🇷 伊朗: 12,312
🇨🇾 塞浦路斯: 10,240
🇵🇰 巴基斯坦: 9,382
🇨🇷 哥斯达黎加: 9,280
🇪🇪 爱沙尼亚: 9,187
🇳🇬 尼日利亚: 8,907
🇵🇪 秘鲁: 8,855
🇰🇪 肯尼亚: 8,241
🇪🇨 厄瓜多尔: 8,128
🇱🇻 拉脱维亚: 7,835
🇧🇩 孟加拉国: 7,560
🇧🇬 保加利亚: 7,264
🇮🇲 马恩岛: 6,852
🇭🇷 克罗地亚: 6,719
🇳🇵 尼泊尔: 6,431
🇵🇷 波多黎各: 6,260
🇱🇮 列支敦士登: 6,115
🇸🇦 沙特阿拉伯: 5,906
🇱🇰 斯里兰卡: 5,240
🇱🇦 老挝人民民主共和国: 5,237
🇲🇦 摩洛哥: 5,106
🇬🇬 根西岛: 4,818
🇳🇺 纽埃: 4,816
🇬🇹 危地马拉: 4,646
🇱🇧 黎巴嫩: 4,405
🇼🇸 萨摩亚: 4,399
🇩🇴 多明尼加共和国: 4,254
🇷🇸 塞尔维亚: 4,183
🇲🇹 马耳他: 4,158
🇸🇭 圣赫勒拿: 4,121
🇻🇨 圣文森特和格林纳丁斯: 3,730
🇦🇱 阿尔巴尼亚: 3,636
🇻🇪 委内瑞拉: 3,455
🇵🇼 帕劳: 3,440
🇪🇬 埃及: 3,438
🇺🇾 乌拉圭: 3,377
🇸🇽 圣马丁: 3,096
🇨🇲 喀麦隆: 3,047
🇹🇴 汤加: 3,002
🇵🇦 巴拿马: 2,839
🇹🇿 坦桑尼亚: 2,747
🇺🇬 乌干达: 2,678
🇰🇿 哈萨克斯坦: 2,345
🇦🇿 阿塞拜疆: 2,242
🇬🇪 乔治亚州: 2,222
🇬🇭 加纳: 2,049
🇶🇦 卡塔尔: 1,993
🇫🇲 密克罗尼西亚: 1,987
🇰🇼 科威特: 1,981
🇷🇪 团圆: 1,948
🇧🇿 伯利兹: 1,904
🇯🇪 球衣: 1,892
🇧🇲 百慕大: 1,782
🇯🇴 约旦: 1,763
🇦🇽 奥兰群岛: 1,728
🇰🇾 开曼群岛: 1,723
🇦🇲 亚美尼亚: 1,714
🇧🇸 巴哈马: 1,681
🇧🇾 白俄罗斯: 1,651
🇨🇻 佛得角: 1,610
🇰🇭 柬埔寨: 1,551
🇲🇩 摩尔多瓦: 1,483
🇹🇳 突尼斯: 1,427
🇲🇺 毛里求斯: 1,401
🇭🇳 洪都拉斯: 1,386
🇸🇴 索马里: 1,333
🇺🇿 乌兹别克斯坦: 1,317
🇹🇹 特立尼达和多巴哥: 1,305
🇻🇮 美属维尔京群岛: 1,297
🇸🇻 萨尔瓦多: 1,279
🇪🇹 埃塞俄比亚: 1,273
🇵🇲 圣皮埃尔和密克隆: 1,258
🇲🇰 马其顿: 1,202
🇿🇼 津巴布韦: 1,195
🇵🇾 巴拉圭: 1,181
🇧🇭 巴林: 1,159
🇦🇬 安提瓜和巴布达: 1,143
🇧🇧 巴巴多斯: 1,116
🇱🇾 利比亚: 1,100
🇫🇴 法罗群岛: 1,091
🇰🇬 吉尔吉斯斯坦: 1,042
🇷🇼 卢旺达: 1,040
🇧🇦 波斯尼亚和黑塞哥维那: 1,031
🇨🇽 圣诞岛: 1,026
🇯🇲 牙买加: 1,017
🇲🇳 蒙古: 979
🇲🇨 摩纳哥: 944
🇦🇩 安道尔: 918
🇳🇮 尼加拉瓜: 906
🇳🇦 纳米比亚: 876
🇴🇲 阿曼: 871
🇧🇴 玻利维亚: 857
🇲🇻 马尔代夫: 787
🇱🇨 圣卢西亚: 763
🇮🇶 伊拉克: 761
🇸🇹 圣多美和普林西比: 753
🇿🇲 赞比亚: 743
🇫🇯 斐济: 703
🇲🇲 缅甸: 701
🇹🇨 特克斯和凯科斯群岛: 688
🇲🇿 莫桑比克: 663
🇻🇺 瓦努阿图: 663
🇦🇫 阿富汗: 640
🇦🇸 美属萨摩亚: 633
🇨🇮 科特迪瓦: 619
🇵🇸 巴勒斯坦: 613
🇸🇳 塞内加尔: 571
🇧🇼 博茨瓦纳: 568
🇻🇬 英属维尔京群岛: 545
🇬🇵 瓜德罗普岛: 538
🇩🇿 阿尔及利亚: 536
🇨🇩 刚果: 536
🇸🇨 塞舌尔: 508
🇭🇹 海地: 504
🇬🇱 格陵兰: 492
🇬🇮 直布罗陀: 471
🇦🇴 安哥拉: 463
🇬🇩 格林纳达: 452
🇲🇬 马达加斯加: 413
🇲🇸 蒙特塞拉特: 364
🇵🇬 巴布亚新几内亚: 358
🇹🇫 法属南部领土: 344
🇲🇶 马提尼克岛: 340
🇬🇾 圭亚那: 338
🇲🇱 马里: 334
🇬🇺 关岛: 325
🇲🇼 马拉维: 324
🇦🇼 阿鲁巴: 318
🇬🇸 南乔治亚和南桑威奇群岛: 315
🇬🇲 冈比亚: 286
🇸🇷 苏里南: 240
🇸🇱 塞拉利昂: 236
🇲🇷 毛里塔尼亚: 228
🇧🇳 文莱: 224
🇱🇷 利比里亚: 224
🇾🇹 马约特岛: 220
🇨🇰 库克群岛: 220
🇨🇺 古巴: 212
🇸🇾 叙利亚: 208
🇹🇬 多哥: 192
🇧🇯 贝宁: 153
🇧🇮 布隆迪: 152
🇲🇴 澳门: 151
🇸🇿 斯威士兰: 148
🇨🇼 库拉索: 145
🇸🇧 所罗门群岛: 143
🇼🇫 瓦利斯和富图纳: 143
🇸🇩 苏丹: 141
🇩🇯 吉布提: 135
🇹🇯 塔吉克斯坦: 133
🇵🇫 法属波利尼西亚: 127
🇱🇸 莱索托: 123
🇳🇨 新喀里多尼亚: 116
🇲🇵 北马里亚纳群岛: 113
🇧🇹 不丹: 106
🇹🇱 东帝汶: 104
🇸🇲 圣马力诺: 103
🇸🇯 斯瓦尔巴群岛和扬马延岛: 103
🇧🇫 布基纳法索: 95
🇳🇪 尼日尔: 92
🇬🇦 加蓬: 85
🇰🇳 圣基茨和尼维斯: 81
🇩🇲 多米尼加: 78
🇾🇪 也门: 70
🇬🇫 法属圭亚那: 66
🇸🇸 南苏丹: 47
🇫🇰 福克兰群岛: 47
🇰🇮 基里巴斯: 46
🇺🇲 美国小岛屿: 36
🇭🇲 赫德岛和麦克唐纳群岛: 32
🇨🇬 刚果: 31
🇳🇫 诺福克岛: 27
🇧🇱 圣巴泰勒米: 27
🇵🇳 皮特凯恩: 26
🇬🇼 几内亚比绍: 21
🇹🇲 土库曼斯坦: 21
🇲🇭 马绍尔群岛: 18
🇹🇩 乍得: 18
🇳🇷 瑙鲁: 18
🇧🇶 博内尔: 18
🇬🇳 几内亚: 17
🇻🇦 梵蒂冈城: 11
🇪🇷 厄立特里亚: 9
🇦🇶 南极洲: 9
🇬🇶 赤道几内亚: 2

AI 机器人 Robots.txt 类别

全部 Robots.txt 人工智能机器人

从饼图中排除

Robots Disallow

Some Robots Disallow

一般机器人不允许规则。