自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(36)
  • 资源 (1)
  • 收藏
  • 关注

原创 记一个requests小知识

可能和pip install requests安装的版本与conda安装的requests版本的区别https://www.cnblogs.com/zhang-can/p/12435503.html

2020-12-30 20:25:45 139

原创 driver下载

Chromehttp://chromedriver.storage.googleapis.com/index.html

2020-10-15 19:31:53 215

原创 杂谈(scrapy)其实是对于继承问题的不熟悉

这是一篇没有什么重点的自我救赎文…最近开始对框架进行下手了…第一个框架就是比较熟悉的scrapy框架,首先导入源码…密密麻麻麻麻,好多文件,该怎么解析?该按着什么顺序去看所有的代码比较容易贯通呢?scrapy的大佬们,你们是怎么规划的呀,萌新求教啊T_T内事不决问百度!搞他!看了半天,感觉一看起框架就比较深奥了,大佬们的功力还是深厚…我还是做一个适合我自己的攻略吧先搞个项目:*家租房信息.搞他首先访问主页,获取全国城市列表,拼接完整的url,访问各地租房的列表页.接着进行二次请求的发起,获

2020-09-26 20:25:20 210

原创 一个json文件中多个json数据的提取

今天拿到一个json文件,里面有两个json数据,使用jsonlines没有加载成功.因此自己写了一个小工具.新人创作.转载请注明出处!!谢谢其实我想发源码的,怎么没找到上传附件的地方.只能在我的资源里上传吗…先上传在资源里吧,等萌新熟悉了再搞一波...

2020-09-22 22:08:47 2048 1

原创 OpenCV4.4.0 imread()读取图片失败

闲来无事,最近做一点新东西.OpenCV图像处理库一:打开图像img = cv2.imread('路径', 0)二:展示图像cv2.imshow(img)结果直接报错了:TypeError: imshow() missing required argument 'mat' (pos 2)参数没传全啊,看资料是传了一个字符串,难道展示图片还要有一个名字吗?加上呗cv2.imshow('img', img)又报错了:cv2.error: OpenCV(4.4.0) ..\modules\h

2020-09-13 20:17:48 4536 3

原创 python 知识扫盲

v1 = 1 or 3print(v1)v2 = 1 and 3print(v2)v1 = 1v2 = 3or 具有截断效果,满足条件之后不会再匹配v3 = 0 or False and 1print(v3)v4 = False or 0 and 1]print(v4)v3 = Falsev4 = 0False和0意义上是一样的,由于or的截断效果导致结果不一致将字典按值的顺序排序sorted(dic_items(), key=lambda x:x[1])[(‘a’,

2020-08-17 20:39:46 209

原创 MySQL数据库查看时区

打开pycharm的databases,找到连接MySQL点击Testconnection就会出现前面的downloading对话框

2020-08-03 20:13:18 1125 1

原创 win10安装MySQL8.0.20

下载安装包,https://dev.mysql.com/downloads/mysql/参考教程:https://www.cnblogs.com/xiaohanlin/p/10345501.htmlhttps://www.cnblogs.com/kunjian/p/11202636.html最终有效的参考:https://blog.csdn.net/weixin_42581112/article/details/88897060下载安装包:https://dev.mysql.com/download

2020-08-03 17:13:54 218 5

原创 Python入门课(二)

Python入门课(二)列表列表:一个以中括号包围,逗号分隔,有序的可以修改的序列。>>> list_a=[1,2,3,"a",[1,2,3,"a"]]>>> list_a[1, 2, 3, 'a', [1, 2, 3, 'a']]>>> 列表与字符串数据类型的相互转换...

2020-07-29 15:05:38 128 3

原创 代码中使用pyecharts(一)

这篇攻略真的很全了https://blog.csdn.net/qq_31967985/article/details/79975663?utm_source=blogxgwz2目前我用的都在这里找到了,有待完善的地方见后篇…如何在代码中使用pyecharts制图https://github.com/goodloving/pyecharts/blob/master/use_pyecharts.py不禁感叹:大佬就是大佬!...

2020-07-27 12:47:07 151

原创 Jupyter Notebook(一)

简介个人感觉类似MATLAB网页版,当然我学的MATLAB也非常的浅显.参考文献:https://blog.csdn.net/zhusongziye/article/details/80370143https://www.jianshu.com/p/91365f343585jupyter的使用教程数不胜数,随便一查什么都有.这里我想记录一下怎么能在Python代码中使用jupyter.pycharm中使用jupyter这个并不是我预期的效果.这个是将jupyter在pycharm中使用,而不是

2020-07-27 12:42:00 153

原创 matplotlib.pyplot(一)

matplotlib中使用最多的就是pyplot库.使用流程创建画布画布设置绘制内容图表完善添加图例坐标轴设置字体设置表格标题保存图片显示图片(可选)ps:有点烦,不能有序列表嵌套无序列表,我的强迫症啊.有知道的大佬请一定教教我!90度鞠躬!画布的创建画布创建时,可以选择是否创建多个画布.创建函数为:p1 = plt.figure()子图的创建p1.add_subplot(参数1, 参数2, 参数3)参数说明:参数1:一块画布被均分成几行参数2:一块画布被

2020-07-27 11:16:20 126

原创 pandas(一)

介绍在Python中,pandas是基于numpy数组构建的.使数据预处理,清洗,分析工作变得更快更简单.pandas是专门为处理表格和混杂数据设计的,而numpy更适合处理统一的数值数组数据.pandas有两个主要的数据结构:series和dataframeseriesseries是一种类似于一维数组的对象,它由一组数据(各种numpy数据类型)以及一组与之相关的数据标签(即索引)组成,即index和values两部分,可以通过索引的方式选取series中的单个或一组值.series的创建pa

2020-07-26 10:39:33 300

原创 numpy的使用(一)(reshape()有待研究)

numpy的使用numpy简介numpy是Python中用来处理大量的维度数组与矩阵运算的库,也针对数组运算提供了大量的数学函数库.numpy主要哦用于数组计算,包含:一个强大的N维数组对象ndarry广播功能函数整合C/C++/Fortran代码的工具线性代数、傅里叶变换、随机数生成等功能numpy通常与SciPy(Scientific Python)和Matplotlib(绘图库)一起使用,这种组合广泛用于替代MATLAB.是一个强大的科学计算环境,有助于我们通过Python学习数据

2020-07-24 12:11:53 1263

原创 Python爬取B站视频

今天有点闲,想着爬取一下哔哩哔哩的视频练练手.说干就干!打开B站,搜索"鸡你太美",大叔就是这么潮流,哈哈.废话不多说,吭哧吭哧开始肝.F12—>Network—>一无所获.在我的理解中,视频应该有个访问连接的呀,而且放在json格式的文件中,这样我们直接访问资源URL就可以下载到视频了呀.然而,并没有.接下里就是长达四五个小时的文献参考以及试错.在网上看到的都是从up主个人主页里下载视频的,和我的预期有些不符,所以我们就先看前辈们的资料吧.我们来到一个up主的个人中心,开始吭哧吭

2020-06-26 20:27:47 1595

原创 pycharm连接MongoDB数据库

开启MongoDB服务安装第三方库pymongoimport pymongoclient = pymongo.MongoClient(host='127.0.0.1', port=27017)# 查询所有的数据库# print(client.list_database_names())# print(client.database_names())# 查询所有集合# 步骤:# 1.先进入数据库(两种方式)# sc = client.schoolsc = client['schoo

2020-05-24 14:21:27 980

原创 MongoDB指令

MongoDB的启动:启动MongoDB的服务连接本地MongoDB的数据库操作:在MongoDB/bin目录下打开命令窗,shift+鼠标右键输入命令: mongod.exe --dbpath 你创建的MongoDB的db路径注意:MongoDB的端口号:默认是27017MySQL的端口号默认是3306MongoDB的指令:查看当前数据库版本号:db.version()2 .查看当前所在的库:db默认是test数据库查看数据库连接的地址:db.getMongo()查

2020-05-24 11:24:34 223

原创 MongoDB的安装

安装包安装:选custom,自定义安装然后选择安装路径,建议在路径最后加一个MongoDB的文件夹,保证文件都在该目录下.安装完成之后进行配置在MongoDB目录下创建data目录在data目录下创建db和log两个目录在log目录下创建mongo.log文件在MongoDB目录下创建一个txt文件,在txt文件中输入配置信息:dbpath=你的db目录的路径,包含db,一直到*\dblogpath=你的log文件的路径,一直到\mongo.log将文件名重命名为mongo.co

2020-05-24 11:13:29 150

原创 安卓模拟器的配置

爬取手机APP时,要使用安卓模拟器,在模拟器中进行一些配置,并结合fiddler抓包工具,进行数据的获取.这些设置涉及的知识点有些什么?

2020-05-23 10:32:20 664

原创 anaconda Python环境下第三方库的镜像源的设置

我还不会啊

2020-05-11 17:53:10 407 1

原创 初识写脚本

今天学习了一位前辈写的脚本文件,总结一下收获吧.不是关于具体的代码,逻辑等等,只是来总结一下写脚本文件要注意的一些地方.首先,引入的第三方库,要有一个大概的说明,库大致是用来做什么的(便于小白理解),如果能加上为什么要引入这几个库就很完美了.用到了什么方法,要注释一下该方法的效果.其次,脚本文件的参数以及输入最好在脚本文件开始的位置进行说明.最好包含参数类型,可能会传入的具体内容....

2020-05-10 19:52:51 205

原创 Python第三方库镜像源

我装了一个conda,结果在pycharm可视化的界面里搜不到第三方库了,幸好发现命令行还能用.被迫使用命令行安装第三方库第三方库镜像源阿里源:https://mirrors.aliyun.com/pypi/simple清华:https://pypi.tuna.tsinghua.edu.cn/simple中国科技大学https://pypi.mirrors.ustc.edu.cn/simple/华中理工大学:http://pypi.hustunique.com/山东理工大学:http://py

2020-05-10 19:45:40 1390

原创 Linux上运行爬虫项目

在阿里云的Linux上安装了docker镜像,然后在docker镜像中运行爬虫项目首先要有项目.然后将项目文件放入docker镜像中然后就运行.问题一:docker镜像中的Python没有requests第三方库—>我就pip install requests结果又遇到没有 pip install—>然后就看怎么能装上pip install在docker环境中先输入wget --no-check-certificate https://bootstrap.pypa.io/g

2020-05-10 06:54:10 987

原创 Windows中的path环境变量

作用:为了让cmd找到各种命令exe工具,配置path找到了exe所在目录就可以了.修改完path后要重新启动cmd关于path的一些指令where python查询Python.exe的目录path查看所有的环境变量的配置...

2020-05-07 13:04:43 180

原创 request那些事

本文是关于Python3中requests包中发送请求的一些总结请求方式主要是根据HTTP协议中的请求设置的,主要有:get请求,post请求,put请求,delete请求,head请求,options请求.最常用的就是get和post请求参考文献: https://www.cnblogs.com/ranxf/p/7808537.html请求超时设置timeout属性,单位是秒res...

2020-05-07 05:47:48 145

原创 response那些事

本文介绍的是Python中requests模块在发送get/post请求后,接收到的响应的一些属性/函数参考文献: https://www.cnblogs.com/ranxf/p/7808537.htmlresponse.text和response.content返回的数据类型,一个是字符串型,一个是字节型respons.status_code查看返回状态1xx-响应未完全接收2x...

2020-05-07 05:27:27 243

原创 正则表达式

再来占个坑

2020-04-29 15:38:57 101

原创 cookie和session

先占个坑

2020-04-29 14:30:50 120

原创 有道翻译--爬虫

爬虫基本流程目标网址user_agent身份验证请求头设置请求体数据发送请求并接收响应接收数据简单处理基本流程中遇到的问题1. 目标网址的获取在抓包工具中找到目标网址,或者在浏览器开发者工具中找到网址,不要找错了!2. 用户主机身份声明user_agent身份信息,这个比较简单3.请求头设置请求头内容用抓包工具可以获得4.请求体数据抓包工具中的body表单-...

2020-04-28 10:25:01 313 2

原创 Python2中的urllib2到Python3

本文借鉴自万能网友https://blog.csdn.net/weixin_42825585/article/details/94856394urillb2在python3中的变化在Pytho2.x中使用import urllib2——-对应的,在Python3.x中会使用import urllib.request,urllib.error。在Pytho2.x中使用import urlli...

2020-04-27 15:34:19 180

原创 Python2和Python3中的编码解码

Python2Python3中的str对象在Python2中叫做Unicode.而bytes对象在 Python2中叫做str即:我们通常理解中的str在Python2中使Unicode而字节型数据在Python2中被定义成了strPython2中的Unicode对象中的decode方法不能使用Python2中的str对象中的encode方法不能使用.Python2中大量模块的编码方...

2020-04-22 16:05:16 141

原创 Django模板语言中的小知识

乘除{% widthratio count 分母 分子 %}整除{% if 数字|divisibleby:整除数 %}{% endif %}举例:隔行变色{% if 变量|divisiblebly:2 %}{% endif %}相等{% ifequal value1 valuew2}{% endifequal %}不相等—ifnotequal过滤器...

2020-04-07 18:19:01 128

原创 pycharm快捷键

pycharm中的那些快捷键Ctrl+Alt+L 自动添加代码格式table键 自动补全 光标向右移动 缩进shift+tableAlt+enter 自动添加/importCtrl + z,Ctrl + Shift + z 撤销与反撤销Ctrl+backspace Ctrl+enter...

2020-04-02 16:37:41 186

原创 镇博!!!

学了这么久的Python,突然发现一个最!基!础!的!这么久才发现实在汗颜!愧对学了一门这么有意思的编程语言罪过!罪过!补发此博来镇楼,给我的编程之路扫平一切BUG!!Python之禅(破音喊~)怎么觉得有点模糊呀,不过确实是本人手动调出来的!!!下面是一位前辈有趣的翻译!链接:https://blog.csdn.net/change_you_or_world/article/de...

2020-01-07 12:43:50 138

原创 Python入门课小记(三)

单声道频谱图的绘制文件路径的设置file_path = r'E:\课程'file_name = r'\9主动脉喷射音.wav'file = file_path+file_nametip:一般有路径的字符串赋值时前面加r来取消反斜杠的作用。file_name字符串中的反斜杠开头是为了拼接方便。文件数据的提取import wavef = wave.open(file,'r')pa...

2019-12-18 22:18:09 162

原创 Python入门课小记(一)

Python入门课小记(一)

2019-12-11 11:19:35 118

读取一个文件中的多个json数据

读取一个文件中的多个json数据,可能还存在一些bug.为什么要超过50个字!看不起我的概括能力吗?

2020-09-22

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除