python3下用selenium库和chrome的headless模式实现网页抓取(注释中有用phantomJS的小段代码)
代码功能:实现动态网页下的数据抓取(本例主要是因为要点击“加载更多”的按钮的原因)要注意的地方:1、chrome无需专门下载什么headless版本,桌面版在用的就可以,但是要下多一个chromedriver,并且要跟所用的chrome版本对应,chromedriver下载地址为:http://chromedriver.storage.googleapis.com/index.html。...
原创
2018-07-19 17:30:46 ·
1153 阅读 ·
1 评论