百度蜘蛛，是百度搜索引擎的一個自動程序。它的作用是訪問收集整理互聯(lián)網(wǎng)上的網(wǎng)頁、圖片、視頻等內(nèi)容，然后分門別類建立索引數(shù)據(jù)庫，使用戶能在百度搜索引擎中搜索到您網(wǎng)站的網(wǎng)頁、圖片、視頻等內(nèi)容。

名稱 對應user-agent
網(wǎng)頁搜索 Baiduspider
無線搜索 Baiduspider
圖片搜索 Baiduspider-image
視頻搜索 Baiduspider-video
新聞搜索 Baiduspider-news
百度搜藏 Baiduspider-favo
百度聯(lián)盟Baiduspider-cpro
競價蜘蛛Baiduspider-sfkr

成功
200 正常;請求已完成。
201 正常;緊接POST命令。
202 正常;已接受用于處理，但處理尚未完成。
203 正常;部分信息 — 返回的信息只是一部分。
204 正常;無響應 — 已接收請求，但不存在要回送的信息。

重定向
301 永久重定向 — 請求的數(shù)據(jù)具有新的位置且更改是永久的。
302 暫時重定向 — 請求的數(shù)據(jù)臨時具有不同URI。
303 請參閱其它 — 可在另一URI下找到對請求的響應，且應使用 GET方法檢索此響應。
304 未修改 — 未按預期修改文檔。
305 使用代理 — 必須通過位置字段中提供的代理來訪問請求的資源。
306 未使用 — 不再使用;保留此代碼以便將來使用。

代碼中的錯誤
400 錯誤請求 — 請求中有語法問題，或不能滿足請求。
401 未授權(quán) — 未授權(quán)客戶機訪問數(shù)據(jù)。
402 需要付款 — 表示計費系統(tǒng)已有效。
403 禁止— 即使有授權(quán)也不需要訪問。
404 找不到—服務器找不到給予的資源;文檔不存在。
406 不可接受 — 根據(jù)此請求中所發(fā)送的“接受”標題，此請求所標識的資源只能生成內(nèi)容特征為“不可接受”的響應實體。
407 代理認證請求 — 客戶機首先必須使用代理認證自身。
410 請求的網(wǎng)頁不存在(永久);
415 介質(zhì)類型不受支持 —服務器拒絕服務請求，因為不支持請求實體的格式。
500 內(nèi)部錯誤 — 因為意外情況，服務器不能完成請求。
501 未執(zhí)行 —服務器不支持請求的工具。
502 錯誤網(wǎng)關(guān)—服務器接收到來自上游服務器的無效響應。
503 無法獲得服務 — 由于臨時過載或維護，服務器無法處理請求。