百度移动搜索的的spider与网页搜索的一样,都是用于访问互联网上的网页,建立索引数据库,使用户能在百度搜索引擎中搜索到您网站上的网页。
不同的是移动搜索的爬虫自带了手机访问UA,能够更加方便的抓取移动网页。尤其那些在PC站和移动站之间做了自适配的网站,移动搜索spider是发现这一跳转关系的主要功臣。
为 了帮助站 长了解移动搜索spider,我们将其UA特征公布给大家:Mozilla/5.0 (Linux;u;Android 2.3.7;zh-cn;) AppleWebKit/533.1(KHTML,like Gecko) Version/4.0 Mobile Safari/533.1 (compatible;+http://www.baidu.com/search/spider.html)
希望各位站长朋友在了解特征的同时,能够对移动搜索spider更加友好:
1、尽量不要对百度移动搜索spider设置禁止抓取。
2、在PC站与移动站之前


