爬虫
文章平均质量分 77
淡若扶风
全屋定制设计师
喜欢Python
喜欢音乐,电影,旅途的风景
记录分享工作学习生活中的美好
展开
-
上班摸鱼用Python写一个酷狗音乐播放器
Python改变生活,科技改变世界。这个五一好想出去浪啊,可惜工作不允许啊,只放了两天假,不得不又回到工作岗位了,虽然也没啥事,然后就上班摸鱼写了这个酷狗音乐播放器,自己一边听歌一边下载歌曲歌词也蛮爽的,内心有点小开心。同样的,讲述代码的过程之前,先给大家展示一下成品效果。自己写的一个简单的酷狗音乐播放器...原创 2021-05-04 21:14:39 · 650 阅读 · 14 评论 -
利用Python爬一下赵丽颖的新浪微博内容和评论
最近赵丽颖离婚时间闹得是沸沸扬扬啊,正好写了一个爬微博内容和评论的爬虫,很多功能后续还会完善,今天先上个尝鲜版,我们先看看爬虫的运行效果,上图:可以看到我们已经读取到了赵丽颖微博的关注人数,粉丝数量,微博等级,微博主页链接,当然最重要的是微博内容和各大网友的吃瓜评论了,继续上图看看。当然为了不给微博网站带来太多了压力,这里只爬取6条微博各20条评论,效果展示出来了就行了,爬完了内容和评论当然少不了内容展示的词云图,看效果完整代码如下:# -*- coding: u...原创 2021-04-26 09:10:12 · 695 阅读 · 11 评论 -
利用Python爬取凤凰网首页新闻
人生苦短,我用Python前面写了一个爬取小说的,想想用Python爬小说好像low了点(不够高大上啊(逼格不够啊)),今天给大家整个高端点的,我们来爬一下凤凰网的首页新闻,这下逼格应该够了。爬取网页嘛,大家都知道request,beautifsoup,今天我们整点不一样的,今天使用的是pyquery,这也是一个第三方库,需要使用pip install 来安装的,安装方法想必大家都知道的,我这里就不赘述了,至于使用方法,可以看一下这个pyquery,我们就直接开始操作了。打开凤凰网我们按F1原创 2021-04-21 22:00:52 · 1545 阅读 · 0 评论 -
PyQuery用法详解
人生苦短,我用PythonPyQuery是强大而又灵活的网页解析库,如果你觉得正则写起来太麻烦,如果你觉得BeautifulSoup语法太难记,如果你熟悉jQuery的语法那么,PyQuery就是你绝佳的选择。一、初始化方式,有三种,可以传入字符串,传入url,传入文件。字符串初始化html = ‘’’ first item second item third item fourth item转载 2021-04-21 20:51:42 · 1917 阅读 · 0 评论 -
用Python免费下载小说并记录章节数量以及下载时间
人生苦短,我用Python 最近再看Python数据处理,看的有点头疼,想着换个脑子,便写了这个在大神看来比较简易的小说下载的爬虫,输入小说的名字就可以下载小说,并显示小说的章节数量以及下载完成的时间,期间也是来回修改了几次,本来还想加入多线程的,实在有点搞,后面有机会再说。 说到这里,估计很多小伙伴都在叫了,废话这么多,怎么操作啊,赶紧上干货!别着急,干货这就来了。 首先我们这里会用到两个库,requests以及BeautifulSoup,三个模块os , time , re ,相信原创 2021-04-20 21:51:29 · 404 阅读 · 3 评论