自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(14)
  • 资源 (2)
  • 收藏
  • 关注

原创 Git应用

git安装及ssh配置1.安装githttps://git-scm.com/downloads打开Git官网下载安装程序,然后按照默认选项安装即可。安装完成后,打开Git bash软件,弹出一个类似cmd的命令行窗口,证明安装成功。2.基本配置安装完毕之后,打开git bash开始配置。在命令行输入以下代码:$ git config --global user.name "Your Name"$ git config --global user.email "email@example.com

2021-01-07 15:33:22 113

原创 Git使用笔记

git安装和ssh配置安装使用git首先需要在自己的电脑端安装git工具,选择所需的对应安装包进行下载后点击安装包,使用默认设置进行安装:链接地址:https://git-scm.com/downloads安装成功,在桌面右击菜单中存在:Git Bash here和Git GUI here两个选项。ssh配置1.打开Git Bash,输入:ssh-keygen.exe后连续回车出现:表示key更新成功。2.查看此时windows登录用户的用户名,假设是yang,打开团队创建和基本命令

2021-01-07 15:31:52 119 1

原创 爬虫中的代理技术

代理的使用场景需要爬虫高频率地访问某一站点,同时站点又存在着反爬虫措施,会封掉高频率爬取的IP:例如访问得到403 Forbidden之后提示“您的 IP 访问频率太高”或者跳出一个验证码让我们输入,输入之后才可能解封。 需要访问境外的网站代理的设置爬虫中可以使用多种请求库,如 Requests、Urllib、Selenium 等,下面先梳理一下这些库的代理设置方法。获取代理设...

2020-11-16 14:35:52 5659

原创 开发笔记:在Python中使用redis的相关知识

安装redis的python库为了能够在Python上使用redis,首先需要预先安装对应的库:pip install redispython使用redis的基本模式在python程序中使用redis,基本模式为:获取连接---->对数据进行操作(增删查改)。获取连接1.redis连接#连接redis一般的参数有:-host:主机地址;-port:端口,...

2020-06-21 19:55:00 151

原创 运维笔记:MySQL数据库相关使用知识

- 多表联合查询等值连接和非等值连接等值连接:只查询左边表有且右边表也有的数据,本质上是依据外键关系,在笛卡尔积查询的基础上过滤出正确的数据。如下,其中,A_id是B表中的外键: Select * from A ,B where A.id=B.A_id修改字符集...

2020-06-21 19:51:46 176

原创 运维笔记:虚拟环境相关

对于部署在服务器上的程序,为了方便运维系统,通常会创建虚拟环境的方法,用来隔离不同项目/程序之间的Python库。创建虚拟环境有两种方法:一是Python3 内置的venv模块;二是使用Anaconda的conda。Anaconda虚拟环境创建虚拟环境 激活虚拟环境 退出虚拟环境 删除虚拟环境...

2020-06-21 19:51:11 138

原创 Docker容器化部署

前言:要在Docker上运行应用程序,首先必须构建一个容器,而且必须包含使用的所有依赖项。因此,docker容器化部署的基本流程是:1.新建一个包含所有依赖包的 requirements.txt 文件;2.创建一个Dockerfile,该文件用来描述构建映像过程;3.生成docker镜像;3.实例化该镜像得到一个容器,启动该容器完成部署;当启动容器时还需要放开应用程序的HTTP端口。python生成requests.txt文件有三种方法可以自动生成requests.txt文件。pip进入所需

2020-05-11 10:35:24 2041

原创 selenium的使用笔记

Python爬虫概述Python爬虫入门之后,要完成一个功能完全的爬虫程序,可以有两个方法实现:继续深入学习,以及关于设计模式和工具的一些知识,强化Python相关知识,继续为自己的爬虫增加数据库,去重,分布式,多线程等功能扩展。 学习一些优秀的框架,先把这些框架用熟,可以确保能够应付一些基本的爬虫任务,先解决0到1的问题;然后再深入学习它的源码等知识,进一步强化、提高效果。以上是崔大...

2020-04-02 16:10:55 200

原创 实现爬虫的模拟登录(二)

Python实现模拟登录的三种方法

2020-04-01 21:21:21 540

原创 在windows下安装和配置Redis

前言:之前在实验室电脑上就安装过redis,现在预备在个人笔记本上装一个,顿时有点后悔没有好好做笔记又得花费精力寻找和参考其他博客,现在赶紧mark一下。果然要养成随手笔记的好习惯才能高效学习!下载windows版本的redis安装包Redis官方不建议在windows下使用Redis,所以官网没有windows版本可以下载。但微软团队维护了开源的window版本,下载地址:https...

2020-03-31 11:54:29 194

原创 实现爬虫的模拟登录(一):有关基础知识

登录的作用

2020-03-17 15:16:25 155

原创 mysql数据库连接的相关报错和解决办法

Server returns invalid timezone. Go to 'Advanced' tab and set 'serverTimezone' property manually. 错误原因:服务器返回无效时区。转到“高级”选项卡并手动设置“serverTimezone”属性。 解决办法: 在datagrip中操作: 在mysql命令行输入: show var...

2020-03-13 15:51:42 259

原创 数据迁移:Datagrip导出/导入数据

通过sql文件进行导出操作导出数据+表结构导出数据导出表结构导入操作

2020-03-13 11:24:18 15206 1

原创 开始使用Docker

Docker简介Docker安装LinuxwindowsPS:安装过程中遇到了错误:no default boot2docker iso found locally查看docker的状态Docker打包应用要在Docker上运行应用程序,首先必须构建一个容器,而且必须包含使用的所有依赖项——因此,新建一个包含所有依赖包的 requirements.txt 文件,然后创建...

2020-03-13 11:14:37 140

数据处理2.0

使用Python Pandas 进行数据处理小心得,对应博客数据处理2.0

2018-11-16

数据处理程序

使用Python处理数据1.0的完整代码,具体情境应用见相应的博客

2018-10-30

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除