上次给大家展示了爬取当当图书的爬虫项目,这次展示一下爬取京东手机商品的展示,总共爬取了一百页,大概是六千四百多个关于手机的商品。
首先还是给大家介绍需要安装的库:
这些模块想必大家已经安装过了,没有的话就按照上面的进行安装
首先打开京东的url:https://www.jd.com/
搜索框中搜索"手机"两字,进行网页分析
中,打开即可以展示出手机的所有信息:
我们爬取里面的手机品牌,描述,价格、图片等的信息。
使用xpath来进行分析:find_elements_by_xpath("//div[@id='