该网站已禁止 DuckDuckGo 机器人的规则。
https://help.duckduckgo.com/duckduckgo-help-pages/results/duckduckbot/
Robots.txt
获取以下数据 430,422 网站 即 DuckDuckGo Bot Disallow 顾客. 我们知道 286,720 直播网站 使用 DuckDuckGo Bot Disallow 以及额外的 143,702 使用的网站 DuckDuckGo Bot Disallow 历史上 和 49,717 网站 美国
297,992 实时网站
270,110 实时网站
312,516 实时网站
250,649 实时网站
233,900 实时网站
181,817 实时网站
156,388 实时网站
844,473 实时网站
90,943 实时网站
84,870 实时网站
63,355 实时网站
1,335,258 实时网站
1,417,242 实时网站
54,616 实时网站
51,290 实时网站
1,709,582 实时网站
1,856,245 实时网站
36,783 实时网站
26,459 实时网站
3,461,325 实时网站
3,471,126 实时网站
3,518,939 实时网站
22,873 实时网站
4,299,023 实时网站
4,719,358 实时网站
4,923,004 实时网站
4,992,257 实时网站
5,015,490 实时网站
5,119,278 实时网站
5,190,420 实时网站
获取列表 341,106 网站使用 DuckDuckGo Bot Disallow 其中包括位置信息、托管数据和联系方式。 该列表包括 286,720 直播网站 和 54,386 重定向到这些网站的网站。 49,717 这些网站 美国.
我们还知道 143,702 使用过的站点 DuckDuckGo Bot Disallow 之前.