Archivo robots.txt Distribución de uso En Indonesia

Arriba en Archivo robots.txt Distribución de uso En Indonesia

Tecnología	Sitios web	%
Googlebot Disallow	22.107	10,84
Robots Disallow	17.966 *	8,81
Baidu Bot Disallow	17.276	8,47
Some Robots Disallow	14.683	7,2
Yahoo Slurp Disallow	14.169	6,95
Alexa Bot Disallow	11.082	5,44
Yandex Bot Disallow	9.445	4,63
Sogou Bot Disallow	9.419	4,62
Microsoft BingBot Disallow	8.690	4,26
Microsoft MSNBot Disallow	7.125	3,49
Google Image Bot Disallow	6.718	3,3
Google AdsBot Disallow	5.705	2,8
Google Media Partners Disallow	5.024 *	2,46
GPTBot Disallow	4.848	2,38
Ahrefs Bot Disallow	4.692	2,3
Majestic Bot Disallow	4.454	2,18
AppleBot Disallow	4.036	1,98
Soso Bot Disallow	4.014	1,97
Google AdsBot Mobile Disallow	3.998	1,96
Semrush Bot Disallow	3.691	1,81
Common Crawl Bot Disallow	3.589	1,76
Anthropic Claude Bot Disallow	3.320	1,63
Google Bard Disallow	2.480	1,22
Apple AI Bot Disallow	2.170	1,06
Perplexity	1.901	0,93
Facebook Bot Disallow	1.845	0,9
ByteDance Bytespider Disallow	1.714	0,84
Exalead Bot Disallow	1.511	0,74
Cohere AI Disallow	1.143	0,56
Webz Omgili Disallow	946	0,46
Pipl Disallow	783	0,38
Google AdsBot Mobile Apps Disallow	781	0,38
Diffbot Disallow	755	0,37
YOU Disallow	709	0,35
360 Bot Disallow	203	0,1
Youdao Bot Disallow	163	0,08
BuiltWithBot Disallow	143	0,07
DuckDuckGo Bot Disallow	110	0,05
Google News Bot Disallow	94	0,05
LLMS Text	83	0,04
Google Video Bot Disallow	75	0,04
Google Favicon Disallow	60	0,03
Google API Bot Disallow	60	0,03
Google DuplexWeb Disallow	56	0,03
Anthropic Claude User Bot Disallow	20	0,01
Anthropic Claude Search Bot Disallow	20	0,01
Google FeedFetcher Disallow	3	0

203.879 Detecciones

de Archivo robots.txt En Indonesia. Última actualización 01st jul. 2025.

Googlebot Disallow Actualmente es la tecnología más popular en esta categoría.