小李SEO博客

網站優化服務

如何判斷新版Baiduspider移動ua和PCua?識別百度蜘蛛抓取的方法

         作者:小李網絡建設     來源:www.shoespublisher.com

一、新版移動ua

Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

二、新版PCua

Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

三、判斷識別區分

百度站長平臺發布公告宣布新版Baiduspider移動ua上線,同時公布了PC版Baiduspider ua,那么該如何正確識別移動ua呢?我們百度站長平臺技術專家孫權老師給出了答案: 之前通過“+http://www.baidu.com/search/spider.html”進行識別的網站請注意。您需要修改識別方式。

新的正確的識別Baiduspider移動ua的方法如下: 1. 通過關鍵詞“Android”或者“Mobile”來進行識別,判斷為移動訪問或者抓取。 2. 通過關鍵詞“Baiduspider/2.0”,判斷為百度爬蟲。 另外需要強調的是,對于robots封禁,如果封禁的agent是Baiduspider,會對PC和移動同時生效。即,無論是PC還是移動Baiduspider,都不會對封禁對象進行抓取。之所以要強調這一點,是發現有些代碼適配站點(同一個url,PC ua打開的時候是PC頁,移動ua打開的時候是移動頁),想通過設置robots的agent封禁達到只讓移動Baiduspider抓取的目的,但由于PC和移動Baiduspider的agent都是Baiduspider,這種方法是非常不可取的。

上一篇:沒有了 下一篇:SEO輔助工具大全有哪些?讓網站排名優化事半功倍
?
相關SEO文章閱讀
SEO公司排名
在线视频国产网站你懂得},97se亚洲国产综合自在线观看,婷婷五月色综合香五月a,欧洲自拍视频另类中文字幕
?
QQ在線咨詢
SEM競價推廣
137-1296-7640
SEO優化外包
137-1296-7640