该网站已禁止 Microsoft MSNBot 的规则。
https://blogs.bing.com/webmaster/2009/08/10/crawl-delay-and-the-bing-crawler-msnbot
Robots.txt
获取以下数据 1,552,659 网站 即 Microsoft MSNBot Disallow 顾客. 我们知道 446,491 直播网站 使用 Microsoft MSNBot Disallow 以及额外的 1,106,168 使用的网站 Microsoft MSNBot Disallow 历史上 和 232,801 网站 美国.
获取列表 1,552,659 网站使用 Microsoft MSNBot Disallow 其中包括位置信息、托管数据、联系方式、 446,491 当前直播网站 以及额外的 454,545 重定向至此列表中的站点的域名。 1,106,168 以前使用过该技术的网站和 232,801 网站 美国 目前正在使用 Microsoft MSNBot Disallow.
国家
Financial
Group
Region