很多人学习Python很重要的一个原因是,可以很简单的把一个网站的数据爬下来。
尤其是电商行业。
领导:弄一个买卖游戏周边商品的交易APP出来。
我:行,那我们卖什么呀?
领导:看下友商卖什么我们就卖什么。
我:好吧,那就爬点数据下来吧。
玩笑归玩笑,虽有夸张成分,但也不无道理。
作为入门级别,首先就来学习下怎么爬取网站图片。只需要调用4个方法,即可轻松批量拿到网站图片。
下面对于每一步调用的方法进行详细说明(主要还是自己拿了别人代码之后遇到的坑)
第一步:获取网页的源代码
urllib.request.urlopen().read()
这个方法是获取到请求的这个URL所返回的网页源代码信息数据,返回值是bytes类型时,要将其转换成utf-8才能正常显示在python程序中,所以还要调用decode()方法进行解码。
最终得到的就是平时我们编写或者查看的页面源代码了。
对Python感兴趣或者是正在学习的小伙伴,可以加入我们的Python学习扣qun:855408893 ,从0基础的python脚本到web开发、爬虫、django、数据挖掘数据分析等,0基础到项目实战的资料都有整理。送给每一位python的小伙伴!每晚分享一些学习的方法和需要注意的小细节,学习路线规划&#