![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
KWHua
来自于Python的小白
展开
-
爬虫的基本面试
爬虫基本的面试题在你的平时工作中,你在写爬虫的时候都遇到过什么样的反爬措施?你都是怎么解决它们的?答:Header:从用户的headers进行反爬是最常见的反爬虫策略.headers是一种区别浏览器星航和机器行为中最简单的方法,还有一些网站会对Referer(上级链接)进行检测(机器行为不太可能通过链接跳转实现)解决措施:通过审查元素或者开发者工具获取相对应的headers,然后把对应的headers传输给Python的requests,这样就能很好的绕过headers验证了IP限原创 2021-03-09 14:23:19 · 837 阅读 · 0 评论 -
Python pip 安装第三方库的国内镜像
清华:https://pypi.tuna.tsinghua.edu.cn/simple阿里云:http://mirrors.aliyun.com/pypi/simple/中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/华中理工大学:http://pypi.hustunique.com/山东理工大学:http://pypi.sdutlinux.org/豆瓣:http://pypi.douban.com/simple/...原创 2021-01-28 13:09:30 · 154 阅读 · 0 评论 -
numpy
numpy矩阵numpy:计算模块;主要有两种数据类型:数组和矩阵特点:运算快[]+[]1、numpy创建矩阵import numpy as npmat1 = np.mat('1 2 3;2 3 4;1 2 2')mat1print(type(mat1))<class 'numpy.matrixlib.defmatrix.matrix'>mat2 = np.mat('1 3;4 7;2 4')mat2matrix([[1, 3], [4, 7],原创 2020-12-30 20:37:32 · 1152 阅读 · 15 评论 -
初识pandas及基本的增删改查
pandaspandas1.表格数据操作;【增删改查】2.实现多个表格的处理;3.数据清洗操作: 缺失值,重复值,异常值,数据标准化,数据转换的操作;4.实现excel的特殊操作:生成透视表,交叉表;5.完成统计分析;import pandas as pdimport numpy as np一、构建dataframe创建方法一:df = pd.DataFrame(data=[['ss',20, '男','0831'],['lx',20, '女','0830'],['lx',22, '原创 2020-12-30 20:35:29 · 793 阅读 · 0 评论 -
redis的字符串和列表,及集合的操作
Redis安装了解Redis环境的搭建下载当前redis最新版本是4.0,它是一个测试版本,稳定版本是3.2版本。当前ubuntu虚拟机中已经安装好了redis,以下步骤可以跳过 最新稳定版本下载链接:http://download.redis.io/releases/redis-3.2.8.tar.gzstep1:下载wget http://download.redis.io/releases/redis-3.2.8.tar.gz[外链图片转存失败,源站可能有防盗链机制,建议原创 2020-12-11 09:05:52 · 481 阅读 · 0 评论 -
这些正则你都知道吗?
匹配的边界符号含义^匹配开头$匹配结尾各种符号的表示符号含义.匹配出\n职位的任意一种字符\d匹配任意一个数字0-9,相当于[0-9]\D匹配任意一个非数字,相当于[^0-9]\w匹配任意一个数字,字母和下划线相当于[0-9a-zA-Z_]\W匹配任意一个非(数字,字母和下划线)相当于[^0-9a-zA-Z_]\s匹配任意一个空白,例如:\t,\n,\r,空格等\S匹配任意一个非空白[]匹配原创 2020-11-23 22:35:00 · 297 阅读 · 8 评论 -
Flask的开始
Flask的开始Flask介绍框架:对于同一类型的项目共性代码的封装,称为框架。Flask 是python开发编写的web框架,相较其他框架,Flask更加的轻量,灵活,但是对python代码能力要求高,Flask只提供了最基本web功能,其他功能都需要开发者自己使用python代码实现,所以,Flask项目质量是由开发者的能力决定的,但是,随着版本迭代,好多社区,组织,三方开发出了公共的Flask插件,开发者不再需要编写好多功能,转为,下载,安装使用三方插件。[外链图片转存失败,源站可能有防盗链机原创 2020-11-21 19:51:44 · 790 阅读 · 2 评论