360手机助手
背景
- 国内360手机助手广告主信息的抓取
分析
- 分类分析
- 在360中将应用分成了软件(工具类)和游戏(游戏类)
- 游戏中分为角色扮演101587、休闲益智19、动作冒险20、网络游戏100451、体育竞速51、飞行射击52、经营策略53、棋牌天地54、儿童游戏102238
- 软件中分系统安全11、通讯社交12、影音视听14、新闻阅读15、生活休闲16、主题壁纸18、办公商务17、摄影摄像102228、购物优惠102230、地图旅游102231、教育学习102232、金融理财102139、健康医疗102233
- 在360中将应用分成了软件(工具类)和游戏(游戏类)
- 请求分析
- http://zhushou.360.cn/list/index/cid/101587/?page=2
- http://zhushou.360.cn/list/index/cid/:固定的baseUrl
- 101587 :具体的分类id
- page=2:当前页码
- (后续可以通过下一页中是否包含<a>标签,来确定是否已是最后一页)
- http://zhushou.360.cn/list/index/cid/101587/?page=2
- 响应分析
- 以html格式返回,但是返回的信息中没有包名信息
- 可以从img标签中获取icon链接
- 可以<h3>下<a>获取app名称
- 从<a>标签中获取下载链接,但是没有包名