该网站有禁止 Ahrefs Bot 的规则。
https://ahrefs.com
Robots.txt
获取以下数据 11,661,154 网站 即 Ahrefs Bot Disallow 顾客. 我们知道 1,856,245 直播网站 使用 Ahrefs Bot Disallow 以及额外的 9,804,909 使用的网站 Ahrefs Bot Disallow 历史上 和 884,971 网站 美国
1,709,582 实时网站
1,336,985 实时网站
1,335,258 实时网站
3,403,165 实时网站
3,411,375 实时网站
3,453,950 实时网站
4,299,023 实时网站
781,685 实时网站
4,632,227 实时网站
4,719,358 实时网站
4,721,680 实时网站
4,819,381 实时网站
4,888,403 实时网站
4,956,653 实时网站
4,992,257 实时网站
8,297,265 实时网站
8,906,110 实时网站
299,521 实时网站
11,796,610 实时网站
11,856,471 实时网站
12,003,031 实时网站
286,264 实时网站
282,085 实时网站
12,495,810 实时网站
12,568,342 实时网站
12,739,715 实时网站
261,289 实时网站
244,088 实时网站
227,966 实时网站
18,145,897 实时网站
获取列表 1,916,126 网站使用 Ahrefs Bot Disallow 其中包括位置信息、托管数据和联系方式。 该列表包括 1,856,245 直播网站 和 59,881 重定向到这些网站的网站。 884,971 这些网站 美国.
我们还知道 9,804,909 使用过的站点 Ahrefs Bot Disallow 之前.