Googlebot
Googlebot是Google使用的網絡爬蟲軟件,它負責為Google搜尋引擎構建用戶可搜尋的網絡索引。Googlebot包括兩種不同類型的網絡爬蟲,分別為Googlebot Smartphone 和 Googlebot Desktop。 [1]
原作者 | |
---|---|
類型 | 網絡爬蟲 |
網站 | Googlebot FAQ |
一個網站可能會被Googlebot Smartphone和Googlebot Desktop同時抓取。然而Google宣佈從2020年9月開始它會優先顯示移動網站,這意味着Google實際上更多地使用Googlebot Smartphone抓取網站。[2]