Archivo robots.txt Distribución de uso En Namibia

Arriba en Archivo robots.txt Distribución de uso En Namibia

Tecnología	Sitios web	%
Google AdsBot Disallow	542	17,34
Googlebot Disallow	523	16,73
Google AdsBot Mobile Disallow	504	16,12
Robots Disallow	221 *	7,07
GPTBot Disallow	92	2,94
Common Crawl Bot Disallow	89	2,85
AppleBot Disallow	87	2,78
Google Bard Disallow	85	2,72
Anthropic Claude Bot Disallow	83	2,66
Facebook Bot Disallow	82	2,62
Apple AI Bot Disallow	81	2,59
Cohere AI Disallow	81	2,59
Perplexity	80	2,56
Ahrefs Bot Disallow	63	2,02
Microsoft BingBot Disallow	62	1,98
Google Media Partners Disallow	53 *	1,7
Some Robots Disallow	51	1,63
Yahoo Slurp Disallow	49	1,57
Alexa Bot Disallow	47	1,5
Google AdsBot Mobile Apps Disallow	42	1,34
Majestic Bot Disallow	34	1,09
Soso Bot Disallow	33	1,06
Semrush Bot Disallow	31	0,99
ByteDance Bytespider Disallow	14	0,45
DuckDuckGo Bot Disallow	14	0,45
Webz Omgili Disallow	13	0,42
Diffbot Disallow	13	0,42
Microsoft MSNBot Disallow	11	0,35
YOU Disallow	11	0,35
Google Image Bot Disallow	9	0,29
Exalead Bot Disallow	8	0,26
Anthropic Claude User Bot Disallow	4	0,13
Anthropic Claude Search Bot Disallow	4	0,13
360 Bot Disallow	2	0,06
LLMS Text	2	0,06
BuiltWithBot Disallow	2	0,06
Google Video Bot Disallow	1	0,03
Google News Bot Disallow	1	0,03
Google Favicon Disallow	1	0,03
Pipl Disallow	1	0,03

3.126 Detecciones

de Archivo robots.txt En Namibia. Última actualización 01st jul. 2025.

Google AdsBot Disallow Actualmente es la tecnología más popular en esta categoría.