ロボット.txt 使用分布 ジンバブエ

トップイン ロボット.txt 使用分布 ジンバブエ

テクノロジー	ウェブサイト	%
Robots Disallow	375	17.16
Googlebot Disallow	278	12.72
Google AdsBot Disallow	249	11.4
Google AdsBot Mobile Disallow	225	10.3
Baidu Bot Disallow	76	3.48
Ahrefs Bot Disallow	65	2.97
Yandex Bot Disallow	56	2.56
GPTBot Disallow	56	2.56
AppleBot Disallow	54	2.47
Common Crawl Bot Disallow	54	2.47
Yahoo Slurp Disallow	53	2.43
Google Bard Disallow	52	2.38
Anthropic Claude Bot Disallow	51	2.33
Facebook Bot Disallow	50	2.29
Cohere AI Disallow	50	2.29
Apple AI Bot Disallow	50	2.29
Perplexity	50	2.29
Google Media Partners Disallow	48 *	2.2
Google AdsBot Mobile Apps Disallow	42	1.92
Microsoft BingBot Disallow	40	1.83
Semrush Bot Disallow	38	1.74
Alexa Bot Disallow	37	1.69
Soso Bot Disallow	36	1.65
Majestic Bot Disallow	34	1.56
Microsoft MSNBot Disallow	14	0.64
Google Image Bot Disallow	10	0.46
ByteDance Bytespider Disallow	9	0.41
Webz Omgili Disallow	4	0.18
DuckDuckGo Bot Disallow	4	0.18
Google News Bot Disallow	4	0.18
Google Video Bot Disallow	3	0.14
Google Favicon Disallow	3	0.14
Google API Bot Disallow	3	0.14
Google DuplexWeb Disallow	3	0.14
Exalead Bot Disallow	2	0.09
360 Bot Disallow	2	0.09
Diffbot Disallow	2	0.09
YOU Disallow	2	0.09
BuiltWithBot Disallow	1	0.05

2,185 検出

の ロボット.txt ジンバブエ. 最終更新日 13th 5 2025.

Robots Disallow 現在、このカテゴリーで最も人気のあるテクノロジーです。