自定义博客皮肤

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

七牛云第三方资源获取(python)

研究了半天总算搞清楚七牛云的第三方资源获取,在这里开源一下 class SaveImage(object): def __init__(self): # Access Key 和 Secret Key self.access_key = 'YourAK' ...

2019-04-23 17:54:12

阅读数 77

评论数 0

自动化与运维入门(五)——代码发布基本知识

1 代码发布简介 1.1 什么是代码发布 代码发布是:将代码放到互联网服务器上,对外提供web服务。 1.2 发布方式 常见的代码发布方式有两种:手工方式和脚本方 手工发布代码 脚本发布代码 慢 快 干扰因素多 干扰因素少 不安全 ...

2019-03-04 11:16:02

阅读数 177

评论数 0

概率论与数理统计学习笔记三(随机变量,离散随机变量 分布函数)

第九讲 随机变量 这里的性质3可以用函数的概率理解,随机变量本质是函数,而对于一个样本点(x值)只有一个结果(y值),所以x值不同的时候,一定不会有Xi=Xj,也即是空集。 第十讲 离散型随机变量 01分布 二项分布 泊松分布 ...

2019-02-28 13:28:11

阅读数 214

评论数 0

概率论与数理统计二(全概率公式、贝叶斯公式,条件独立性)

第七讲 全概率公式和贝叶斯公式 先看一个题目: 其中,P(Bi)的概率称为先验概率,P(Bi|A)的概率称为后验概率

2019-02-26 23:11:48

阅读数 312

评论数 0

概率论与数理统计学习笔记 (一)

绪论 一、确切来说,概率论和数理统计是两个学科 概率论是数学的一个分支,研究如何定量描述随机现象及其规律 数理统计则是以数据为唯一研究对象,包括数据的收集、整理、分析和建模,从而对随机现象的某些规律进行预测和决策。 二、怎样学习《概率论与数理统计》 学思想 概率统计特殊的研究对象包含了许多独特的思...

2019-02-20 13:24:02

阅读数 596

评论数 0

windows部署代码到docker中

1.按照Docker 网上教程很多,这里就不多啰嗦了 2.生成requirements.txt文件 pip install reqires 安装完成后命令行进入项目根目录,输入 pipreqs ./ --encoding=utf8 如果不进入项目文件夹的话可以修改项目路径,也就是上面的./,后...

2018-12-12 17:24:25

阅读数 257

评论数 0

如何查找Anaconda中不同环境的位置

因为网上没找到答案所以记录一下 本人的路径是在 C:\Users\Star Platinum\AppData\Local\conda\conda\envs\python_for_crawl\Scripts 主要的话就是在 conda/conda/envs 中 实在找不到的可以直接在文件搜索引擎用...

2018-12-06 11:48:10

阅读数 1920

评论数 0

数据分析简单流程

一 基本统计 基本统计分析又叫描述性统计分析,一般统计某个变量的最小值,第一四分位值,中值,第三四分位值,以及最大值。 常用的统计指标: 指标 panda方法或属性 计数 size() 最大值 max 最小值 min 求和 sum 平均值 mean 方差 var...

2018-10-19 00:39:03

阅读数 280

评论数 0

对于常见排序算法的时间复杂度比较

算法 最优 最劣 平均情况 稳定性 备注 冒泡排序 O(n) O(n^2) O(n^2) 稳定 n小时比较好 选择排序 O(n^2) O(n^2) O(n^2) 不稳定 n小时比较好 插入排序 O(n^2) O(n) O(n^2) 稳定 大部分已有顺序时好 希儿排序 O...

2018-10-17 20:37:07

阅读数 286

评论数 0

asyncio学习

asyncio学习 https://blog.csdn.net/sylgdxsgx/article/details/79437928

2018-10-12 12:31:19

阅读数 107

评论数 0

自动化运维入门——(六)代码发布脚本编写

1、简单脚本编写 1.1 命令罗列 目的:实现代码仓库主机上的操作命令功能即可 实现简单的功能— 简单的命令罗列 #!/bin/bash # 功能:打包代码 # 脚本名:tar_code.sh # 作者:itcast # 版本:V 0.1 # 联系方式:ww...

2018-10-10 11:39:13

阅读数 1037

评论数 0

自动化运维入门(四)shell流程控制(控制语句与函数)

2 shell流程控制 2.1 if分支语句 语法格式: if [ 条件 ] then 指令 fi # 作为结束语 #!/bin/bash if [ "weibo&am...

2018-10-10 11:39:06

阅读数 75

评论数 0

自动化与运维入门(三)shell进阶

什么是代码发布: 把代码放到互联网服务器上,对外提供wen使用 发布代码的方式: 手工发布代码 缺点

2018-10-10 11:39:00

阅读数 102

评论数 0

自动化运维入门(二)shell中的变量

2 shell中的变量 2.1 变量介绍 在shell中,变量分为全局变量,局部变量,脚本变量三大类。其次,变量的类型只有字符串,只有在数字运算的时候解释器才会把数字解释成数字。 变量的定义:变量名=变量值 例如: python@ubuntu:~/De...

2018-10-10 11:38:55

阅读数 97

评论数 0

自动化与运维入门(一)自动化运维与shell简介

自动化与运维可以做什么 消除无效率 - 运维工作的手动工作,如果可以实现自动化,将显著提升效率水平。 减少错误 - 即使最谨慎的人,也会犯错,尤其是面对着重复性工作。通过运维自动化工具来完成这样的工作,结果是显而易见的,错误率将大大降低。 最大化员工使用 - 通过运维自动化,运维...

2018-10-10 11:38:49

阅读数 1807

评论数 2

rediscrawlSpider使用-亚马逊图书案例

1.需求了解 需求:抓取亚马逊图书的信息 目标:抓取亚马逊图书信息, 有图书的名字、封面图片地址、图书url地址、作者、出版社、出版时间、价格、图书所属大分类、图书所属小的分类、分类的url地址 url:https://www.amazon.cn/%E5%9B%BE%E4%B9%...

2018-10-10 11:37:50

阅读数 351

评论数 0

redis-spider的使用:当当网图书爬虫案例

需求:抓取当当图书的信息 目标:抓取当当图书信息, 包含: 图书所属大分类、图书所属小的分类、小分类的url地址, 图书的名字、封面图片地址、图书url地址、作者、出版社、出版时间、价格、 url:http://book.dangdang.com 思路分析: 1. 程序的入口...

2018-10-10 11:37:44

阅读数 399

评论数 1

如何自己实现一个scrapy框架——框架雏形(二)

接着上一篇的文章如何自己实现一个scrapy框架 接着记录一下中间件、日志模块、配置文件的实现 一、中间件 1 为什么需要中间件 中间件相当于一个钩子,能够在其中对request对象和response响应根据特定的需求进行一些特定的处理 例如:对于所有的req...

2018-10-10 11:37:17

阅读数 105

评论数 0

如何自己实现一个scrapy框架——框架完善(三)

之前的两篇文章讲解了如何实现一个框架雏形,但是scrapy框架的强大功能一个都没有实现,接下来一个一个实现 一、多爬虫实现之一 – 多请求实现 在爬虫的时候通常都是多个请求同时进行 1、多请求实现分析: 2、 项目中实现爬虫文件 在main.p...

2018-10-10 11:37:03

阅读数 226

评论数 0

如何自己实现一个scrapy框架——框架完善(四)

这篇主要讲解如何实现多爬虫文件和多管道 一、duo多爬虫文件实现 1、首先,将每一个站点的爬虫分离为单独的文件 我们项目中的站点一共两个,百度和豆瓣,分离为两个文件 baidu.py # project_dir/spiders/baidu.py from sc...

2018-10-10 11:36:50

阅读数 113

评论数 0

提示
确定要删除当前文章?
取消 删除