1.百度UA標記:
移動UA:Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,likeGecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)PC UA:Mozilla/5.0 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)
新增渲染UA:
移動UA:Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 likeMac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143Safari/601.1 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
PC UA:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
2.百度蜘蛛IP段大全:
IP主段 |
IP段或IP |
說明 |
60.28.22.* |
60.28.22.0 |
百度蜘蛛,IP段位于天津市 |
60.172.229.* |
60.172.229.61 |
這個ip段百度蜘蛛IP造訪,,準備抓取你東西,,抓取網頁的百度蜘蛛,。 |
61.129.45.* |
61.129.45.72 |
這個ip段百度蜘蛛IP造訪,準備抓取你東西,,抓取網頁的百度蜘蛛,。 |
61.135.162.* |
61.135.162.0- 61.135.169.255 |
這個ip段百度蜘蛛IP造訪,準備抓取你東西,,抓取網頁的百度蜘蛛,。IP段位于北京市 |
61.135.168.* |
61.135.186.0- 61.135.190.255 |
百度圖片爬蟲。IP段位于北京市 |
111.206.*.* |
111.206.198.* |
百度渲染蜘蛛 |
111.206.*.* |
111.206.221.* |
百度渲染蜘蛛 |
116.179.*.* |
116.179.32.12 |
與220開頭的類似,、新版百度蜘蛛,,高權重段,一般抓取文章頁,,IP段位于山西陽泉聯(lián)通,。 |
116.179.32.95 |
重點抓取內頁,爬過的文章或首頁基本24小時放出來,。 |
|
116.179.37.* |
百度渲染蜘蛛,巡查合規(guī),,類同懲罰蜘蛛。 |
|
119.188.14.* | 119.188.14.13/35 | 百度蜘蛛,,IP段位于濟南市 |
121.14.89.* |
121.14.89.* |
這個ip段作為度過新站考察期,,基本上是網站無排名。 |
123.15.*.* |
123.15.*.* |
百度圖片爬蟲,。 |
123.125.66.* |
123.125.66.* |
代表百度蜘蛛IP造訪,,準備抓取你東西,IP段位于北京市 |
123.125.68.* |
123.125.68.* |
這個蜘蛛經常來,別的來的少,表示網站可能要進入沙盒了,,或被者降權,。IP段位于北京市 |
123.125.71.* |
123.125.71.95 |
抓取內頁收錄的,權重較低,,爬過此段的內頁文章不會很快放出來,,因不是原創(chuàng)或采集文章。IP段位于北京市 |
123.125.71.97 |
抓取內頁收錄的,,權重較低,,爬過此段的內頁文章不會很快放出來,因不是原創(chuàng)或采集文章,。IP段位于北京市 |
|
123.125.71.106 |
抓取內頁收錄的,,權重較低,爬過此段的內頁文章不會很快放出來,,因不是原創(chuàng)或采集文章,。IP段位于北京市 |
|
123.125.71.117 |
抓取內頁收錄的,權重較低,,爬過此段的內頁文章不會很快放出來,,因不是原創(chuàng)或是采集文章。IP段位于北京市 |
|
123.181.108.* |
123.181.108.77 |
抓取內頁收錄的,, 權重較低,爬過此段的內頁文章不會很快放出來,因不是原創(chuàng) |
124.166.232.* |
124.166.232.* |
可能為新版新站專屬百度蜘蛛,,或低質量蜘蛛。 |
125.90.88.* |
125.90.88.* |
廣東茂名市電信也屬于百度蜘蛛IP主要造成成分,,是新上線站較多,,還有使用過站長工具,或SEO綜合檢測造成的,。 |
159.226.50.* |
159.226.50.* |
百度其他蜘蛛,,北京聯(lián)通,功能未詳,! |
162.105.207.* |
162.105.207.0-255 |
百度其他蜘蛛,,功能未詳!IP段位于北京市 |
180.76.5.* |
180.76.5.87 |
百度其他蜘蛛,,北京電信,,功能未詳! |
180.76.15.* |
180.76.15.* |
降權蜘蛛,,有這個ip說明網站不會在收錄了,,一直到這個ip段消失。 |
180.149.133.* |
180.149.133.0-255 |
百度其他蜘蛛,,功能未詳,!IP段位于北京市 |
183.91.40.* |
183.91.40.144 |
這個ip段出現在新站或站點有不正常現象后 |
202.108.249.* |
202.108.249.0- 202.108.250.255 |
百度其他蜘蛛,,功能未詳,!IP段位于北京市 |
203.208.60.* |
203.208..60.* |
此ip段為異常蜘蛛,通常由于網站服務器問題或其他違規(guī)行為會引起它來爬取 |
210.72.225.* |
210.72.225.* |
此ip段為日常巡邏蜘蛛,,只要網站沒有問題,,沒有違規(guī)操作就行。 |
218.30.118.* |
218.30.118.102 |
每天這個IP 段只增不減很有可能進沙盒或K站 |
220.181.7.* |
220.181.7.* |
代表百度蜘蛛IP造訪,,準備抓取你東西,。 |
220.181.19.* |
220.181.19.0-255 |
百度其他蜘蛛,功能未詳,!IP段位于北京市 |
220.181.32.* |
220.181.32.0- 220.181.38.255 |
百度其他蜘蛛,,功能未詳!IP段位于北京市 |
220.181.108.* |
220.181.108.0-255 |
百度其他蜘蛛,,功能未詳,!IP段位于北京市 |
220.181.158.* |
220.181.158.107 |
百度其他蜘蛛,功能未詳,!IP段位于北京市 |
220.181.68.* |
220.181.68.* |
每天這個IP 段只增不減很有可能進沙盒或K站降權,。 |
220.181.108.* 【優(yōu)質段】 |
220.181.108.75 |
重點抓取更新文章的內頁達到90%,8%的抓取首頁,2%其他權重ip段,抓過的文章或首頁基本24小時放出來,。 |
220.181.108.77 |
專用抓取首頁IP權重段,一般返回代碼是30400代表未更新,。 |
|
220.181.108.80 |
專用抓取首頁IP權重段,,一般返回代碼是30400代表未更新。 |
|
220.181.108.82 |
抓取tag頁面,。 |
|
220.181.108.83 |
專用抓取首頁IP權重段,,一般返回代碼是30400代表未更新。 |
|
220.181.108.86 |
專用抓取首頁IP權重段,,一般返回代碼是30400代表未更新,。 |
|
220.181.108.89 |
專用抓取首頁IP權重段,一般返回代碼是30400代表未更新,。 |
|
220.181.108.91 |
屬于綜合的,。主要抓取首頁和內頁或者其它頁面。屬于權重IP段, 抓過的文章或首頁基本24小時放出來 |
|
220.181.108.92 |
屬于綜合的,。主要抓取首頁和內頁或者其它頁面,。屬于權重IP段, 抓過的文章或首頁基本24小時放出來 |
|
220.181.108.93 |
重點抓取內頁,爬過的文章或首頁基本24小時放出來,。 |
|
220.181.108.94 |
專用抓取首頁IP權重段,,一般返回代碼是304 0 0代表未更新。 |
|
220.181.108.95 |
這個是百度抓取首頁的專用IP,,基本來說你的網站會天天隔夜快照,。 |
|
220.181.108.97 |
專用抓取首頁IP權重段,一般返回代碼是304 0 0代表未更新,。 |
|
220.181.108.115 |
重點抓取內頁,,爬過的文章或首頁基本24小時放出來。 |
|
220.181.108.119 |
專用抓取首頁IP權重段,,一般返回代碼是304 0 0代表未更新,。 |
|
220.181.108.156 |
重點抓取內頁,爬過的文章或首頁基本24小時放出來,。 |
|
220.181.108.158 |
重點抓取內頁,,爬過的文章或首頁基本24小時放出來。 |
|
220.181.108.180 |
重點抓取內頁,,爬過的文章或首頁基本24小時放出來,。 |
|
220.181.108.184 |
重點抓取內頁,爬過的文章或首頁基本24小時放出來,。 |
|
|
|
|
|
|
百度自家
61.135.186.* :百度聯(lián)盟爬蟲,,百度統(tǒng)計。
61.135.165.134:百度競價蜘蛛北京聯(lián)通。
61.135.169.*:百度公司內部專用IP,;
111.206.198.*:百度渲染蜘蛛,,專門抓取js、css和圖片用的,,百度站長工具落地著陸頁檢測IP,。
111.206.221.*:百度渲染蜘蛛,專門抓取js,、css和圖片用的,百度站長工具落地著陸頁檢測IP,。
117.34.74.66:百度競價蜘蛛西安市電信,。
118.122.188.194:百度競價蜘蛛。
119.63.196.9:百度競價蜘蛛,。
123.125.67.* :百度站長工具的IP sitemap,。
125.39.78.185:百度競價蜘蛛天津聯(lián)通。
203.119.241.*:百度主動推送的IP,。
220.181.51.*:百度站長工具的IP sitemap,。
220.181.108.120:抓取/robots.txt。
220.181.108.146:抓取/robots.txt,。
百度聯(lián)盟爬蟲【百度統(tǒng)計】
61.135.186.*
站長工具模仿的百度蜘蛛,。
61.147.98.146
61.188.39.16
113.98.254.245
117.21.220.245
117.28.255.42
114站長工具箱(這個是你的網站不穩(wěn)定時常來的)
119.147.114.213
121.10.141.*
搜外站長工具蜘蛛。
124.248.34.52
也屬于百度蜘蛛IP 主要造成成分,,是新上線站較多,,還有使用過站長工具,或SEO綜合檢測造成的,,沒有多大用,。
百度蜘蛛
159.226.50.*
180.76.5.*
180.76.5.87
220.181.158.107
偽裝百度蜘蛛IP
180.149.130.*
一般成功抓取返回代碼都200,返回304代表網站沒更新,。