- 博客(10)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 python简单实现一个数字动态进度条
前言在中国慕课网上学习爬虫视频时，看到一个很有意思的优化，有时候我们进行爬取内容时，为了客户体验较好，可以动态显示出爬取的进度。而其实现很容易…就是一个简单的数学方法。思路及讲解假设有一个1000000数据的列表(为了让进度条可以显示出来，很大的数据)，我们每次循环遍历这个列表时向文件中输出，其中增加一个计数器，每次写文件的过程中循环通过计数器来记录，而最后显示的百分比进度则是用(...
2018-03-31 11:09:15
4977
原创 Coursera 机器学习 -- 逻辑回归 笔记 【第二周】
Logistic Regression Model(逻辑回归模型)Cost Function如下所示，本章讲述了如何拟合cost参数θ： hypothesis函数在图中复习一下，在图中我们的假设函数范围在0-1之间.在线性回归方程中我们的代价函数如下： 现在改写一下，去掉平方，让下图蓝色字体等于平方差，实际上还是对数据集从1-m求和的公式，只不过简写了而已，如下图：...
2018-03-28 22:53:44
338
原创 【实时日志分析系列之】-------- 技术选型篇
前言大概是节前到节后的小2个月时间，已经把实时日志分析这一套小架子搭了起来，并且已经可以看到成果，现在继续利用业余时间把这个系列总结记录一下。逻辑架构图逻辑架构图如下：一图胜过千言万语，来看下实时日志分析的技术选型以及整个流程。其实这一套大部分都是组件，而整套组件中用到的都是Elastic Stack中的组件。首先采用了filebeat ( elastic st...
2018-03-24 19:50:35
1541
原创 爬虫练手小实例---【大学排名定向爬取】
引言周末闲来无聊，根据慕课平台的课程练了一波小实例，记录一下成果吧。环境python3requestsBeautifulSouplxml成果展示按照上面的逻辑，从爬取的页面分析开始入手编码之道目标站分析首先来看下爬取的网站：http://www.zuihaodaxue.com/zuihaodaxuepaiming2018.html 可...
2018-03-17 16:45:04
1771
原创 Coursera 机器学习 -- 分类 笔记 【第二周】
Classification(分类)本章讲解了分类的基础概念 分类的例子有很多例如下图，邮件(垃圾分类)，在线交易(是否为欺诈),肿瘤(良性还是恶性)…0代表负类(良性肿瘤)，1代表正类(恶性肿瘤)我们如何开发一个分类算法呢？先不考虑复杂的多项分类，我们从二进制分类问题开始说起，二进制分类也就是0、1两个结果的分类。下图有一个训练集，通过肿瘤的大小来对良性、恶性进行分类的图： ...
2018-03-14 23:06:45
296
原创 记一次---java.lang.NoClassDefFoundError 异常 排错
起因因为系统要对接第三方系统，所以在系统中修改了相关的代码，然而神奇的是，本地启动时无异常，当访问登录界面时也无异常，但是升级测试环境linux的时候，启动无异常，一旦进行登入操作则会爆出了这样的一个异常： 显然这是一个运行时异常，在编译器并没有错误。因为在登录的时候调用了这个类SingletonThreadPool。Caused by: java.lang.NoClassDefFoun...
2018-03-14 11:15:03
3890
原创 Coursera 机器学习 -- Matrices and Vectors 笔记(线性代数复习课)【第一周】
Matrices and VectorsMatrices(矩阵)矩阵:是由数字组成的，并且在[]中的。它是由行和列组成。 例如下图中，左侧就是一个4×2的矩阵，而右侧是一个2×3的矩阵，而通常表示一个矩阵是几行几列的写法便是R^4×2,代表着它是4×2的矩阵。再看下图，通过A来标识具体矩阵的某个元素，例如A11=1402，代表的就是A这个矩阵的第一行，第一列的元素是1402，...
2018-03-10 21:08:48
931
原创 Coursera 机器学习 -- Gradient Descent 笔记【第一周】
Gradient Descent(梯度下降算法)————————本章讲的是数学上的定义———————————- 首先来看一张图：可以把这个图看成一个山，如果我想要下山，我的小碎步应该从那个方向下山？看看周围，会自己找到下山的最佳路线，重复以上动作，你会以最快的速度下山。直到局部最低点。这则是梯度下降的生动比喻。这种算法有个有趣的点，如果我们初始化的时候向右边移动一点点，会发现另一...
2018-03-08 23:50:02
484
翻译 ZIPKIN官方文档翻译【2018-03-03】(zipkin2.5.1)
前言logo:了解下链路式监控的的新技术，上级指定了一个开源的软件—zipkin。特此翻译一下官方文档，以便学习。Home(主页)ZipkinZipkin是一个分布式追踪系统。 它有助于收集解决微服务架构中延迟问题所需的时序数据。 它管理这些数据的收集和查找。 Zipkin的设计基于Google Dapper论文。这里提供一篇译文，有兴趣的可以了解一下。应用程序...
2018-03-03 21:29:07
3864
原创 Coursera 机器学习 -- Linear Regression 笔记【第一周】
Linear regression(线性回归):Model Representation(模型代表)还是用卖房子来举例, 如房子的大小与价格图： 此例子属于监督学习，因为对于每个数据来说，我们给出了”正确的答案”,即平米数对应的房价. 同时它也是一个回归问题,回归一词指的是我们根据之前的数据预测出一个准确的输出值。m=训练样本的数量x=输入变量/特征值y=输出...
2018-03-01 21:32:42
383
Python3.6.2 linux
2017-09-16
SVN密码破解工具（查看曾经库的用户名和密码）
2017-08-21
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人