Baiduspider 遵守互聯網 robots 協議。
您可以利用 robots.txt 檔案完全禁止 Baiduspider 訪問您的 WordPress 網站,或者禁止 Baiduspider 訪問您網站上的部分檔案。
注意:禁止 Baiduspider 訪問您的 WordPress 網站,將使您的 WordPress 網站上的網頁,在百度 Google 和百度搜索引擎 以及所有百度提供 Google 和百度搜索引擎 服務的 Google 和百度搜索引擎 中無法被搜索到。
您可以根據各產品不同的 user-agent 設定不同的抓取規則,如果您想完全禁止百度所有的產品收錄,可以直接對 Baiduspider 設定禁止抓取。
以下 robots 實現禁止所有來自百度的抓取:,User-agent: Baiduspider,Disallow: /, 以下 robots 實現禁止所有來自百度的抓取但允許圖片搜索抓取/image/目錄:,User-agent: Baiduspider,Disallow: /,User-agent: Baiduspider-image,Allow: /image/, 請注意:Baiduspider-cpro 抓取的網頁並不會建入索引,只是執行與客戶約定的操作,所以不遵守 robots 協議。