Babbar.tech 正在運(yùn)營(yíng)一項(xiàng)名為 Barkrowler 的爬蟲服務(wù)，該服務(wù)推動(dòng)并更新我們對(duì)萬維網(wǎng)的圖形表示。該數(shù)據(jù)庫和我們計(jì)算的所有指標(biāo)都用于為 SEO 社區(qū)提供一套在線營(yíng)銷和參考工具。

不過對(duì)于國(guó)內(nèi)網(wǎng)站來說不會(huì)帶來什么流量，可以選擇robots.txt協(xié)議禁止。

User-agent: barkrowler

Disallow: /

如果還是禁止不了，可以選擇nginx規(guī)則禁止訪問，如下：

if ($http_user_agent ~* "barkrowler") {

 return 403;

}