99热精品在线,欧美精,自慰免费,国产亚洲无码一区

湖南長沙八年做網(wǎng)站,網(wǎng)絡優(yōu)化推廣服務團隊,讓您小投資大回報,幫您打開網(wǎng)絡營銷財富之門!
 業(yè)務服務熱線:0731-88571521  13637482004  
 


地址:長沙市韶山南路248號南園503
      室(瀟湘晨報旁)
電話:0731-88571521
手機:136-3748-2004
Q  Q:44377655 522392221
網(wǎng)址:www.sdwxvip.com
郵箱:522392221@qq.com
SEO網(wǎng)絡推廣
長沙做網(wǎng)站聯(lián)系電話:0731-88571521 13637482004

網(wǎng)站抓取:如何正確識別Baiduspider移動ua?

信息來源:長沙網(wǎng)站建設   發(fā)布時間:2015-5-22   瀏覽:

近日,百度站長平臺發(fā)布公告宣布新版Baiduspider移動ua上線,同時公布了PC版Baiduspider ua,那么該如何正確識別移動ua呢?對此,百度站長平臺技術專家孫權給出了答案。

新版移動ua:

Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

PC ua:

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

之前通過“+http://www.baidu.com/search/spider.html”進行識別的網(wǎng)站請注意!您需要修改識別方式,新的正確的識別Baiduspider移動ua的方法如下:

1. 通過關鍵詞“Android”或者“Mobile”來進行識別,判斷為移動訪問或者抓取。

2. 通過關鍵詞“Baiduspider/2.0”,判斷為百度爬蟲。

另外需要強調的是,對于robots封禁,如果封禁的agent是Baiduspider,會對PC和移動同時生效。即,無論是PC還是移動Baiduspider,都不會對封禁對象進行抓取。之所以要強調這一點,是發(fā)現(xiàn)有些代碼適配站點(同一個url,PC ua打開的時候是PC頁,移動ua打開的時候是移動頁),想通過設置robots的agent封禁達到只讓移動Baiduspider抓取的目的,但由于PC和移動Baiduspider的agent都是Baiduspider,這種方法是非常不可取的。



  




相關熱點文章


地址:長沙市韶山南路248號南園503室(瀟湘晨報旁)  網(wǎng)站ICP備案號:湘ICP備09008272號  版權所有:長沙斌網(wǎng)網(wǎng)絡工作室
咨詢電話:0731-88571521   136-3748-2004
業(yè)務 QQ:客服一 1306053142 客服二 1320506001 技術/售后 522392221 高級顧問 44377655
服務郵箱:fanbin@binweb.cn   522392221@qq.com
官方網(wǎng)址:www.sdwxvip.com   www.pk0731.com
旗下網(wǎng)站:斌網(wǎng)網(wǎng)絡  長沙信息處  佛佛網(wǎng)  曬土貨網(wǎng)