对于爬虫遇到的JS渲染的问题的一些解决方法

对于爬虫遇到的一些关于JS渲染的解决方法:

1.动用动态技术

          Selenium+PhantomJS或者其他的一些动态框架

2.Splash:

       我没用过,所以不好评价

3.自己动用Google Chrome找寻请求,然后找出参数进行模拟.

   比较好练手的就是http://www.dm5.com

   推荐去看下这个.... 

 

动用动态技术的话效率就是你的瓶颈,虽然快速暴力,而且也省去了很多麻烦,但是我个人比较喜欢第3个方法,实在是找不出请求了就在说.

ok,往后继续推出各种技术的文章,这次只是水一篇,因为刚好搜索看到爬虫抓取js渲染的文章,然后便试着去做了下....

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值