- 博客(11)
- 收藏
- 关注
转载 提高Git工具clone下载速度
改变端口号git config --global http.proxy http://127.0.0.1:1080git config --global https.proxy https://127.0.0.1:1080取消方法git config --global --unset http.proxygit config --global --unset https.proxy...
2020-02-29 11:38:04
226
原创 HTTP和HTTPS
HTTP请求流程一次http请求的基本流程是,有客户端向服务端发起一次请求(request),而服务器在接收到以后返回给客户端一个响应(response)。所以一次完整的http请求包含请求和响应两部分。提供http服务的服务器,会默认监听80端口,也就是服务器上的服务端程序监听的端口为80端口。 &nbs...
2019-04-06 12:21:12
173
原创 爬取百度新闻写入CSV文件——Python爬虫
在开始之前,我们先明确我们本次要爬什么内容:接着,我们大概会用到以下几个知识点:rerequestsxpathcsv第一步,我们先将一些变量准备好import requestsimport urllib.parseimport osfrom lxml import etreeimport randomimport csvimport reword="税"#转...
2019-02-24 19:49:50
4874
8
原创 用Python写一个酷狗爬歌系统
今天我们用Python来写一个简单的酷狗下载程序我将这个程序打包成exe文件,有兴趣的可以看下。链接:https://pan.baidu.com/s/1K2ETIL09-Xwpe4pBtojNiQ提取码:1b1o我们先上代码,看下步骤:import requestsimport jsonimport osimport urllib.parse#j为歌曲标头j=1class K...
2019-02-20 11:09:55
1965
3
原创 通过关键词爬取百度图片——Python爬虫
爬取百度图片在这里我们先列出本次爬虫的步骤(思路很重要):1、通过requests获取网页信息2、找到图片链接在哪里3、创建文件夹,将图片下载到本地在开始之前,先讲一下百度图片翻页的一个小细节(看图):这是下滑加载更多的翻页方式(对我们的爬虫造成了干扰)这种是传统的翻页方式(我们爬的是这种网页)那么,我们怎么把网页变成我们想要的呢?在这里教大家一个小技巧:htt...
2019-02-19 18:23:37
4281
7
原创 NumPy库的简单使用
创建数组对象NumPython提供了两种基本的对象:ndarray(下文统一称为数组):存储单一数据类型的多维数组。ufunc(后面再介绍):能够对数组进行处理的函数。1、数组属性数组的属性及其说明属性说明ndim返回int。表示数组的维数shape返回tuple。表示数组的尺寸,对于n行m列的矩阵,形状为(n,m)size返回int。表示数组...
2019-02-18 11:55:51
814
原创 用正则表达式爬CBO年度票房
使用正则表达式爬取票房信息还是老样子哈哈,如果对正则不是很了解的同学,在这里推荐一个学习网址: http://www.runoob.com/python3/python3-reg-expressions.html进入正文,这是我们要爬的网址: http://www.cbooo.cn/year?year=2008而这个,就是我们要爬的内容了:第一步,获取网页信息...
2019-02-17 15:08:11
483
原创 爬虫——爬取京东评价
爬京东商品的评价如果同学们对爬虫不是很了解的话,可以先看下爬虫的定义、原理。在这里我给大家推荐一篇文章:  https://www.cnblogs.com/sss4/p/7809821.html首先,我们拿一件商品的链接来作为例子(这是一个2080ti的链接,博主已经沉浸在暴富的粪坑里了)https://item.jd.com/8797490.html#crumb-w...
2019-02-16 17:42:06
9082
9
转载 Python的基本数据类型
Python的基本数据类型基本数据类型一、字符串(String)二、数字(Number)三、列表(List)四、集合(Set)五、元组(Tuple)六、字典(Dictionary)基本数据类型Python中的变量不需要声明。每个变量在使用前都必须赋值,变量赋值以后该变量才会被创建。在Python中变量就是变量,是内存地址指针,它没有类型,我们所说的"类型"是变量所指的内存中对象的类型。类似...
2019-02-16 14:31:55
164
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人