![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 80
菜鸟程序熊
本来以为不会再走技术了,没想到,生活就是生活,总是要一棍子又一棍子的把人干躺下,只不过是从头再来。
展开
-
win10安装scrapy ,个人安装过程错误及结果
恩,经过一段时间的学习,新的章节已经开启,初次接触scrapy,原谅我还没弄明白他是什么。。。。无良博主又来刷新一波博客,熟悉了一段时间的bs和正则,准备接触新的部分 scrapy ,正如标题所说,无良的脑残博主又和当时安装bs的时候一样,直接安装scrapy,闲话不叙,进入正题首先感谢我的学姐小刀儿砸,我的安装过程就是由她的博客学来的:http://blog.csdn.net/tt_25原创 2016-11-30 19:08:01 · 2982 阅读 · 0 评论 -
爬 CSDN 1024程序员节论坛作者内容点赞量
好久没写博客了,还好本熊(不是熊本熊)不写小说,不然扔过来的砖都够盖小房子了。闲话少叙,进入正题今天刚刚爬了csdn论坛有关程序员节的内容,诺。。就他 http://blog.csdn.net/1024.html习惯性打开网页源代码,额,,,,果然,nothing 。一个动态加载的网页,或许是json加载的,,恩 ,没错fn+f12(在Dell机上有快捷键设置,只好用fn+的方法),翻原创 2016-11-16 20:52:34 · 1871 阅读 · 3 评论 -
爬虫第二战,beautifulsoup小例
额。。这个标题着实难到我这个英文很烂的人了,毕竟在验证bs的时候有着四个单词写错俩的战绩,不过想要真的成为一只程序熊,阴雨(英语)很烂可是不行的。进入正题。 如果有在bs安装的时候遇见问题的小伙伴可以去看之前的博客,虽然很烂,,只希望能稍微帮上一丢丢。bs在某些方面是要优于正则的,比如它是通过标签对问题进行获取分析的,直观上看起来会比较简单,但,有些时候单靠bs是获取不到有些内容的佐以正则原创 2016-12-14 19:37:12 · 1064 阅读 · 0 评论 -
爬虫第三战 json爬取网易新闻
出洞,写代码,本熊这次要带来的新内容是涉及到一部分动态网页的问题,爬取网易新闻,感觉这次难度不是一般的大,好吧,,其实我每次都是这么想的。我什么时候能写出非常棒的代码呢(图样图森破),转回正题,NOW如果按以前的老套路一定是上网址,放代码等等但这次这个套路似乎已经行不通了,当打开新闻评论所在的网址的源代码时,搞什么!!什么也没有,莫方莫方,不是我们的评论被黑掉了,只是我们的打开方式不正确,换个原创 2016-12-14 21:04:46 · 5151 阅读 · 1 评论 -
爬虫第四战爬取糗事百科搞笑段子
又开始了新的篇章,本熊继续一个Python小白的修行之路,这次要爬取糗事百科主页的段子,恩 。。看起来不错的样子,只是段子不能吃 ,不然,啧啧。。。相信很多人有去糗百看段子减压的习惯,如果能把这些段子爬下来,以后即便到了一个没网的地方 ,只要文本在手就不会冷场,还是好处多多的。3.2..1...开始爬虫之旅(今天说了两段废话,这习惯得改)今天的爬虫主要是为了复习下正则,所以相对还原创 2016-12-14 21:54:31 · 700 阅读 · 0 评论 -
爬取起点小说
倒霉催的熊博主又回来了,恩。。你没有看错,本熊并没有冬眠,而是在各种搞事搞事搞事(这样说话是会挨揍的)。。。我们的目标是搞事情!!!!进入正题,应用BS和正则爬取起点小说所有免费完本小说(听起来就好口怕)这一篇与接下来的一篇将会是姊妹篇,先剧透下,下一篇博文同样是爬取起点小说的所有免费完本小说,区别在方法不同,bs+re VS scrapy 。Begin Fight!!!原创 2016-12-12 19:06:58 · 10726 阅读 · 3 评论 -
爬虫第五战 scrapy小说爬取
终于发了起点小说爬取的姊妹篇,scrapy小说爬取,到现在这种方式还不是十分理解,但还是试了,也试出了一些成果,那么,现在进入正题Scrapy是一个为了爬取网站数据,提取结构性数据而编写的应用框架。可以应用在包括数据挖掘,信息处理或存储历史数据等一系列的程序中。(好吧,这是我抄的)原创 2016-12-18 21:46:44 · 2965 阅读 · 1 评论 -
pip安装numpy、scipy模块失败解决办法
咳咳,新学期开始了,又会有新的问题出现、新的麻烦解决、新的方法学习以及新的问题出现、新的方法学习、新的问题解决,周而复始(某熊的神经大概是出现了问题),好吧,我是被模块给折磨的有些不正常了,经历了辣么长的一个晚上,终于找到了解决办法 新人小白熊最近在看有关机器学习的东西,然而一开始就给了一个下马威,在安装numpy模块时,发现一直以各种姿态安装失败,如这种 (安装文件名错误)原创 2017-03-10 16:14:39 · 10197 阅读 · 1 评论