![](https://img-blog.csdnimg.cn/20201014180756930.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
一转眼又不见
这个作者很懒,什么都没留下…
展开
-
python 使用selenium爬取网页并分类保存到本地文件夹
以上是咱们今天要爬取的图片,可以看到这个游戏壁纸主题有35页,咱们不是要爬取这35 页的图片。这个页面的尺寸也不是高清原图。我们发现点进去后能看到高清图,如下: 这个就是咱们想要的内容了,这个页面主图是只有一张,蒙多这个主题是有10张的,我们可以在主图上点击下一页,跳转到下一张。这里很适合我们使用selenium去爬取了。 直接来分享我的爬取思路吧,代码如下:from se.原创 2021-06-14 14:13:07 · 1702 阅读 · 0 评论 -
爬取lol官网所有英雄照片,并存储到pysql
百度英雄联盟,进入官网,在游戏资料里面找到所有英雄数据在页面F12中network中找到hero_list.js,所有的数据都在这里面,接下来就简单了,直接放上代码将数据储存到mysqlimport requestsimport jsonimport pymysqlurl = 'https://game.gtimg.cn/images/lol/act/img/js/heroList/hero_list.js'conn = pymysql.Connect(host='127.0.0.1...原创 2021-06-12 21:26:44 · 362 阅读 · 1 评论 -
python 30行代码爬取豆瓣top250电影排名保存到Execl中
import requestsimport xlwtfrom bs4 import BeautifulSoupdef analyse(url,datelist): header ={ "User-Agent": "Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36" } resp = req原创 2021-04-17 17:59:53 · 360 阅读 · 2 评论