- 博客(4)
- 收藏
- 关注
原创 centos升级git
在使用git pull、git push、git clone的时候,或者在使用jenkins发版的时候,可能会报类似如下的错误: error: The requested URL returned error: 401 Unauthorized while accessing https://git.oschina.net/zemo/demo.git/info/refs fatal: HTTP...
2018-03-18 17:09:25 1258
原创 centos6.5下安装python3
日常吐槽:在centos6.5上安装一个python3被网上乱七八糟的资料糊弄了半天,浪费了很多时间,发现网上的很多教程全是清一色的复制粘贴,连一些个人博客里面的东西都是抄别人的自己也没有亲身实践过就直接用了。。。。。。真是不太懂。所以自己整理一个好了。。。首先安装依赖包yum -y groupinstall "Development tools"yum -y install zli...
2018-03-18 10:55:11 2806 2
原创 基于搜狗接口的微信公众号及其信息爬取
1.思路经测试,搜狗搜索提供的微信公众号的接口是理所当然爬取多了会被封ip等方式重点照顾。这只是做一个公众号及其链接的爬取,公众号的内容爬取及制定内容的爬取都是一个路子。搞懂了一个其他的就都差不多了。2.整体实现 具体实现的话就两个方面: 1)代理的使用(获取可用ip) 2)微信公众号的爬取3.代码部分1)获取可用的ip,然后随机选取一个ip...
2018-03-13 15:50:25 1508
原创 爬虫中python2的urllib2和python3的urllib
Python 3.x版本后的urllib和urllib2现在的Python已经出到了3.5.2在Python 3以后的版本中,urllib2这个模块已经不单独存在(也就是说当你import urllib2时,系统提示你没这个模块),urllib2被合并到了urllib中,叫做urllib.request 和 urllib.error 。urllib整个模块分为urllib.request, url...
2018-03-13 09:48:35 350
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人