百度蜘蛛IP段,百度蜘蛛IP介紹

重點(diǎn)：百度內(nèi)容抓取蜘蛛U(xiǎn)A：

百度PC蜘蛛U(xiǎn)A：Mozilla/5.0(compatible;Baiduspider/2.0;+http://www.baidu.com/search/spider.html）

百度移動蜘蛛U(xiǎn)A：Mozilla/5.0(Linux;u;Android 4.2.2;zh-cn;)AppleWebKit/534.46(KHTML,likeGecko)Version/5.1 Mobile Safari/10600.6.3(compatible;Baiduspider/2.0;+http://www.baidu.com/search/spider.html)

次重點(diǎn)：百度能執(zhí)行JS、CSS高級爬蟲UA

百度PC渲染抓取UA: Mozilla/5.0(compatible;Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html)

百度移動渲染蜘蛛U(xiǎn)A：Mozilla/5.0(iPhone;CPU iPhone OS 9_1 likeMac OS X)AppleWebKit/601.1.46(KHTML,like Gecko)Version/9.0 Mobile/13B143Safari/601.1(compatible;Baiduspider-render/2.0;+http://www.baidu.com/search/spider.html)

百度圖片蜘蛛：Baiduspider-image+(+http://www.baidu.com/search/spider.htm)

百度圖片爬蟲IP段：123.15.**.**

如何知道搜索引擎蜘蛛在什么時(shí)間段來訪自己的網(wǎng)站，可以通過查看網(wǎng)站的日志文件，或通過程序判斷來訪者的User-agent協(xié)議頭來判斷蜘蛛類型及蜘蛛IP。

根據(jù)不同的IP我們可以分析網(wǎng)站是個怎樣的狀態(tài)，以下常見的百度蜘蛛IP:

123.125.68.*這個蜘蛛經(jīng)常來,別的來的少,表示網(wǎng)站可能要進(jìn)入沙盒了，或被者降權(quán)。

220.181.68.*每天這個IP 段只增不減很有可能進(jìn)沙盒或K站。

220.181.7.*、123.125.66.* 代表百度蜘蛛IP造訪，準(zhǔn)備抓取你東西。

121.14.89.*這個ip段作為度過新站考察期。

203.208.60.*這個ip段出現(xiàn)在新站及站點(diǎn)有不正常現(xiàn)象后。

210.72.225.*這個ip段不間斷巡邏各站。

125.90.88.* 廣東茂名市電信也屬于百度蜘蛛IP 主要造成成分，是新上線站較多，還有使用過站長工具，或SEO綜合檢測造成的。

220.181.108.95這個是百度抓取首頁的專用IP，如是220.181.108段的話，基本來說你的網(wǎng)站會天天隔夜快照，絕對錯不了的，我保證。

220.181.108.92 同上98%抓取首頁，可能還會抓取其他 (不是指內(nèi)頁)220.181段屬于權(quán)重IP段此段爬過的文章或首頁基本24小時(shí)放出來。

123.125.71.106 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會很快放出來，因不是原創(chuàng)或采集文章。

220.181.108.91屬于綜合的，主要抓取首頁和內(nèi)頁或其他，屬于權(quán)重IP 段，爬過的文章或首頁基本24小時(shí)放出來。

220.181.108.75重點(diǎn)抓取更新文章的內(nèi)頁達(dá)到90%，8%抓取首頁，2%其他。權(quán)重IP 段，爬過的文章或首頁基本24小時(shí)放出來。

220.181.108.86專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

123.125.71.95 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會很快放出來，因不是原創(chuàng)或采集文章。

123.125.71.97 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會很快放出來，因不是原創(chuàng)或采集文章。

220.181.108.89專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

220.181.108.94專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

220.181.108.97專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

220.181.108.80專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

220.181.108.77 專用抓首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

123.125.71.117 抓取內(nèi)頁收錄的，權(quán)重較低，爬過此段的內(nèi)頁文章不會很快放出來，因不是原創(chuàng)或采集文章。

220.181.108.83專用抓取首頁IP 權(quán)重段，一般返回代碼是304 0 0 代表未更新。

注：以上IP尾數(shù)還有很多，但段位一樣的123.125.71.*段IP 代表抓取內(nèi)頁收錄的權(quán)重比較低.可能由于你采集文章或拼文章暫時(shí)被收錄但不放出來.(意思也就是說待定)。

220.181.108.*段IP主要是抓取首頁占80%，內(nèi)頁占30%，這此爬過的文章或首頁，絕對24小時(shí)內(nèi)放出來和隔夜快照的，這點(diǎn)我可以保證!

一般成功抓取返回代碼都是 200 0 0返回304 0 0代表網(wǎng)站沒更新，蜘蛛來過，如果是 200 0 64別擔(dān)心這不是K站，可能是網(wǎng)站是動態(tài)的，所以返回就是這個代碼。

116.179.32.* 已經(jīng)nslookup確認(rèn)是百度蜘蛛

124.166.232.* 已經(jīng)nslookup確認(rèn)是百度蜘蛛