python3爬虫
文章平均质量分 81
vicoqi
这个作者很懒,什么都没留下…
展开
-
window python3 安装pip和scrapy,lxml 过程和出错解决
如果需要转载请私信自己爬过的坑。。。。。 我的环境:win7 python :3.5一.先在cmd下 进入Python的安装目录。 例:C:\Users\asus>cd /d D:\Python\Python35-32 然后在安装目录下输入 easy_install pip如果提示 缺少 setuptool 模块,有的是自带的,没有的话,可以自行百度Google下载,然后放到P原创 2016-08-23 09:53:21 · 1060 阅读 · 0 评论 -
python3 爬虫 urlretrieve
网上的Python3 爬虫教程很少,自己就写了个小例子。import reimport urllib.request###result yes# version 3.5def Schedule(a,b,c): ''' a:已经下载的数据块 b:数据库块的大小 c:远程文件的大小 ''' per = 100.原创 2016-08-20 19:55:09 · 9246 阅读 · 0 评论 -
运用java爬虫和python做词云图
前言: 最近有点时间,就写个东西玩玩,就是分析电影评论做成词云图。这次没有采用python去爬取电影评论,而是采用了java中的多线程和线程池去爬取电影评论,但是用评论做词云图使用python写的。如果不喜欢用java做爬虫的朋友,也可以换成用python语言写,过程不是很重要,看自己喜好。环境: windows 10 jdk 1.7 py...原创 2018-05-24 12:54:01 · 1667 阅读 · 0 评论