Python学习
文章平均质量分 65
PersevereStudy
这个作者很懒,什么都没留下…
展开
-
记第一次写出自己的简单python爬虫:GCZW3
经过差不多一个星期的折腾,当然这其中也有做很多其他事情。周四写出来直接通过浏览器Network找到观察者网评论链接进行的爬虫,今天下午有折腾了差不多一下午,终于通过BeautifulSoup解析出的html中找到了data-id,也就是构造评论链接的关键。找到了data-id之后,这样就可以把每篇文章和其评论建立联系。这样接下来的通过文章链接,直接爬评论的想法就可以水到渠成了。而下午的主要时间都花...原创 2018-03-11 21:17:09 · 561 阅读 · 0 评论 -
升级完善第一个爬虫GCZW3,使能够批量爬取多篇文章热评
前天写了观察者网的爬虫,只能根据某个网页链接爬取,不能一次性大量爬取多篇文章的热门评论。于是,今天想把它升级一下,让它可以从首页获取首页展示的所有文章的链接,并分别进行爬取。于是写了mainPage2links() 函数,向它传入首页链接,可以得到首页展示文章的链接。然后就可以批量爬取了。当然这其中,也遇到了问题。首页解析后,在h4标签下的子标签a中可以找到文章的网址后半段,因此思路是先取出a标签...原创 2018-03-13 15:47:33 · 947 阅读 · 0 评论 -
Python100例实训(一)
昨天晚上,想到自己作为21世纪的大学生,编程能力居然基本为0,这是一件令人遗憾的事情,如果现在好好学好一门编程语言,一定会在未来有用武之地。否则,将会有很多遗憾。所以决定从python入手。都说python入手容易,但是坚持和毅力是目前大多数人所缺乏的。古人之观于天地、山川、草木、虫鱼、鸟兽,往往有得,以其求思之深而无不在也。夫夷以近,则游者众;险以远,则至者少。而世之奇伟、瑰怪,非常之观,常在于...原创 2018-06-21 19:33:21 · 9601 阅读 · 0 评论 -
Python100例实训(二)
Practice makes perfect所以下决心,一定要把python100实例撸一遍,虽然,这些题目对于大佬们来说太容易了,可是小白撸一遍的话,理解,记忆,思维,应该都有很大的提升的。在此立贴为誓,本人誓将python100个实例在2018.09.01之前认真撸一遍,并且做好笔记,如果做不到,单身狗永不脱单!上一篇中说到这个小目标,在8月份之前已经完成了,后来事情太多,一直没有...原创 2018-09-19 22:13:46 · 754 阅读 · 0 评论