阻止 Facebook 抓取。
https://www.facebook.com/
Robots.txt · 人工智能机器人
获取以下数据 4,361,028 网站 即 Facebook Bot Disallow 顾客. 我们知道 3,515,450 直播网站 使用 Facebook Bot Disallow 以及额外的 845,578 使用的网站 Facebook Bot Disallow 历史上 和 2,525,140 网站 美国
3,462,009 实时网站
3,451,924 实时网站
4,421,166 实时网站
4,430,048 实时网站
4,532,097 实时网站
4,648,308 实时网站
4,719,358 实时网站
4,737,588 实时网站
实时网站
1,266,930 实时网站
4,299,023 实时网站
4,834,727 实时网站
1,856,245 实时网站
1,611,720 实时网站
1,575,317 实时网站
8,297,265 实时网站
8,906,110 实时网站
11,796,610 实时网站
11,856,471 实时网站
12,003,031 实时网站
12,495,810 实时网站
12,568,342 实时网站
12,739,715 实时网站
289,242 实时网站
748,513 实时网站
245,747 实时网站
18,145,897 实时网站
539,531 实时网站
162,121 实时网站
348,246 实时网站
获取列表 3,727,976 网站使用 Facebook Bot Disallow 其中包括位置信息、托管数据和联系方式。 该列表包括 3,515,450 直播网站 和 212,526 重定向到这些网站的网站。 2,525,140 这些网站 美国.
我们还知道 845,578 使用过的站点 Facebook Bot Disallow 之前.