Swiftype是一個(gè)為你的網(wǎng)站定制的搜索引擎。它結(jié)合了 “最好的搜索技術(shù)、算法、內(nèi)容攝取框架、客戶端和分析工具”。

Swiftype是一個(gè)可以為你的網(wǎng)站搜索提供動(dòng)力的軟件

如果你有一個(gè)有許多頁面的復(fù)雜網(wǎng)站，Swiftype提供了一個(gè)有用的界面，為你的所有頁面編目和索引。

Swiftbot是Swiftype的網(wǎng)絡(luò)爬行器。然而，與其他機(jī)器人不同，Swiftbot只抓取他們的客戶要求的網(wǎng)站。

不過對(duì)于國(guó)內(nèi)網(wǎng)站來說不會(huì)帶來什么流量，可以選擇robots.txt協(xié)議禁止。

User-agent: Swiftbot

Disallow: /

如果還是禁止不了，可以選擇nginx規(guī)則禁止訪問，如下：

if ($http_user_agent ~* "Swiftbot") {

 return 403;

}