로봇.txt 사용 분포 니카라과에서

상위 로봇.txt 사용 분포 니카라과에서

기술	웹사이트	%
Googlebot Disallow	172	10.5
Robots Disallow	106	6.47
AppleBot Disallow	98	5.98
GPTBot Disallow	82	5.01
Anthropic Claude Bot Disallow	77	4.7
Google Bard Disallow	76	4.64
Common Crawl Bot Disallow	75	4.58
Facebook Bot Disallow	75	4.58
Cohere AI Disallow	75	4.58
Apple AI Bot Disallow	75	4.58
Perplexity	75	4.58
Baidu Bot Disallow	73	4.46
Google AdsBot Mobile Apps Disallow	65	3.97
Yahoo Slurp Disallow	63	3.85
Some Robots Disallow	56	3.42
Alexa Bot Disallow	55	3.36
Microsoft BingBot Disallow	53	3.24
Yandex Bot Disallow	51	3.11
Google Media Partners Disallow	48 *	2.93
Ahrefs Bot Disallow	32	1.95
Soso Bot Disallow	30	1.83
Microsoft MSNBot Disallow	28	1.71
Majestic Bot Disallow	25	1.53
Google Image Bot Disallow	25	1.53
Semrush Bot Disallow	11	0.67
ByteDance Bytespider Disallow	6	0.37
Exalead Bot Disallow	6	0.37
Diffbot Disallow	4	0.24
Google News Bot Disallow	4	0.24
Google Video Bot Disallow	4	0.24
Google Favicon Disallow	4	0.24
Webz Omgili Disallow	3	0.18
YOU Disallow	2	0.12
360 Bot Disallow	1	0.06
DuckDuckGo Bot Disallow	1	0.06
Google API Bot Disallow	1	0.06
Google DuplexWeb Disallow	1	0.06

1,638 탐지

~의 로봇.txt 니카라과에서. 마지막 업데이트 13th 5 2025.

Googlebot Disallow 현재 이 범주에서 가장 인기 있는 기술입니다.