自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 区块链和比特币初步了解

最近这几天区块链被再一次提到了风口,这次不一样,xxx代言,xxx支持的,作为一个IT人,应该了解下。而且不能太粗略。 一、先过一些基本概念 区块链和比特币 首先这是两个概念,区块链是技术范畴,比特币更像金融范畴。区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应...

2019-10-30 14:27:03

阅读数 5767

评论数 13

原创 vmware虚拟机磁盘空间不足No space left on device

之前搞了个虚拟机,用了很久,今天突然发现磁盘空间不足了,很是头疼,总不能重新弄个,里面很多环境配置不容易啊。于是就想到了扩展磁盘空间。分享本文,希望能帮助大家不走弯路。 1、先关闭虚拟机电源 2、做如下设置:“虚拟机”--“虚拟机设置”--“磁盘”--“扩展” 3、输入你期望的大小(...

2019-05-07 13:04:07

阅读数 1371

评论数 0

原创 JS中var变量声明奇怪用法

【好久没写了,水一篇】 今天试着写了点前端,发现了JS中的一个奇怪用法,如下: JS中变量的奇怪地方 1、函数内,不声明-用全局 2、函数内,先声明-用内部 3、函数内,后声明- undefined 很水,没了。。。 另外,JS中函数没有先声明后使用一说,在定义前前使用也可以的。...

2019-01-31 17:39:40

阅读数 167

评论数 0

原创 SQL判读字段是否为空或者不存在值

coalesce(name,'')<>''#返回true 或者 falseselect * from table where coalesce(name,'')<>'�...

2018-06-12 19:37:37

阅读数 1084

评论数 1

原创 intellij IDEA隐藏INFO日志信息,只显示ERROR

intellij IDEA有很多[INFO]信息有时候很烦,看不到想要的输出,一般情况下,只显示ERROR信息就可以了。1,在源码src下面新建文件夹resources,2,右击resources文件夹Mark Directory as 选中Resources Root3,将spark源码conf...

2018-06-07 09:50:51

阅读数 6691

评论数 1

原创 【算法题】求第N位数字,数列如下112123123412345123456

【算法题】自增自然数列组,求第N位的数字,数列如下112123123412345123456首先,鄙视下出这个题目的人,人为增加难度,无聊。这个题目如果之前没见过,想短时间写出来还是需要一定的脑力的,一步一步抽丝剥茧吧:①先把该数列看成如下形式:11212312345123456……这样我们可以将...

2018-05-02 16:38:07

阅读数 587

评论数 0

原创 霍夫变换直线检测及原理理解

今天有小伙伴提到直线检测,我便讲了霍夫变换,归纳分享下: 首先,介绍笛卡尔空间,就是我们常见的那个几何空间啦,通过 y=kx+b,可以表示直线。 然后,想一下,如果把上面方程变形一下,b=-xk+y,(k和b作为变量,xy作为常量),那么是不是又是一条另外的直线呢?对了,这就是霍夫空间...

2018-03-29 19:17:31

阅读数 1420

评论数 1

原创 数学上各种空间概念的关系图

数学上有各种空间,概念容易混淆,为了记忆,整理出一张关系图。 目前不清楚无限维的内积空间是什么? 也欢迎各位补充其他的概念。

2018-03-29 16:15:23

阅读数 5243

评论数 2

原创 理清Hadoop1.x与Hadoop2.x区别,对比分析

需要整理一篇大数据框架的文章,所以本文复习下Hadoop。 Hadoop是大数据惊世之作,必学的东西,需要知道: 它由哪些部分组成? 各自的作用是什么? 如果工作的? …… Hadoop1.x设计还是有些欠缺的,故而Hadoop2.x加以了完善,老规矩,上图: Had...

2018-02-28 14:04:02

阅读数 296

评论数 0

原创 Tensorflow实现简易的汽车检测car-detect

本文作为一个汽车检测的小Demo,没啥技术含量,内容搜集自网络。数据集及程序来自网络,最原始的项目应该在这里,http://cogcomp.org/Data/Car/。 我整理到一起,大家一起学习学习:(内容是基于tensorflow实现简易的汽车检测car-detect,包含Training和...

2018-02-24 13:59:09

阅读数 2567

评论数 4

原创 【Python】实现汉诺塔

题目: 有A,B,C三根针,将A针上N个从小到大叠放的盘子移动到C针,一次只能移动一个,小盘子必须在大盘子上面。求最少移动方案。 思路: 试想这个过程中,必然会经历那么一个步骤,即有一大坨N-1个盘子在B针这个中转站,而我们正将最大那个盘子(即第N个盘子)从A针移动至C针。 ...

2018-02-23 11:38:50

阅读数 228

评论数 0

原创 LRN (Local Response Normalization,即局部响应归一化层)

LRN (Local Response Normalization,即局部响应归一化层) (一)先看看归一化吧 什么是归一化? 归一化化是归纳统一样本的统计分布性。就是要把你需要处理的数据经过处理后(通过某种算法)限制在你需要的一定范围内。 为什么要归一化,归一化目的是什么? (1)...

2018-02-02 15:42:46

阅读数 5880

评论数 1

原创 深度学习+语音,基础普及篇笔记(二)

接上篇,这里主要讲基于深度学习的语音识别框架。 (一)Kaldi 目前在Github上这个项目依旧非常活跃,可以在 https://github.com/kaldi-asr/kaldi 下载代码,以及在http://kaldi-asr.org/ 查看它的文档。 下载kaldi源码,编...

2018-01-25 17:42:50

阅读数 1743

评论数 1

原创 深度学习+语音,基础普及篇笔记(一)

深度学习应用领域,可以分为3大块:图像,语音,文字。最近有时间,研究下语音: (一)定义 语音是一个连续的音频流,它是由大部分的稳定态和部分动态改变的状态混合构成。 一个单词的发声(波形)实际上取决于很多因素,而不仅仅是音素,例如音素上下文、说话者、语音风格等; (二)语音识别 ...

2018-01-25 17:09:18

阅读数 7305

评论数 0

原创 英伟达nvidia-smi命令延伸使用,NVIDIA显卡日志文件在哪?

首先要想一下,需要什么日志?安装日志?显卡本身运行日志?还是运行性能数据日志?显卡目前来看主要两个用途:图形显示(如Xorg,显示器) 和 计算(如矩阵运算,深度学习)。当然,本质都是计算。(一)安装日志其实这个不用操心,在安装完驱动之后的页面最下面就有显示,对应着路径去找就好啦。如果,很久之后还...

2018-01-19 11:15:32

阅读数 4627

评论数 0

原创 jupyter notebook远程访问不了的问题解决

jupyter notebook非常方便,想在服务器上面搭建一个,但是访问不了。(一)首先是安装jupyter notebook,pip install jupyter如果pip安装报错,缺少sqlite的库,那么请安装sudo apt-get install libsqlite3-dev然后需要...

2018-01-18 14:27:22

阅读数 21602

评论数 25

原创 pyenv管理多版本python及常见错误处理

(一)安装pyenv $ git clone git://github.com/yyuu/pyenv.git ~/.pyenv $ echo 'export PYENV_ROOT="$HOME/.pyenv"' >> ~/.bashrc $ e...

2018-01-17 11:25:05

阅读数 4681

评论数 0

原创 路由协议的总结

(一)路由协议总述 是网络协议里面的一个重要组成部分,一般工作在第三层(即网络层),常见的设备是路由器。 该层的特点是:一般我们只知道IP,不知道具体的Port,也不关系上层是TCP还是UDP。 路由协议有很多,因为区分方式不一样,也容易混淆,故做一个总结,方便自己记忆: ...

2018-01-15 15:04:09

阅读数 1392

评论数 0

原创 网络7层协议,4层,5层?理清容易混淆的几个概念

手痒了,普及一篇网络协议基础知识。 一、7层 7层是指OSI七层协议模型,主要是:应用层(Application)、表示层(Presentation)、会话层(Session)、传输层(Transport)、网络层(Network)、数据链路层(Data Link)、物理层(Physica...

2018-01-15 13:44:57

阅读数 22332

评论数 8

原创 感知机学习总结

感知机是最简单的线性分类模型,但是必须熟知,学习感知机可以理解很多概念。

2018-01-12 10:46:11

阅读数 134

评论数 0

原创 几种优化算法(求最优解)

几种优化算法,先简单备注下,今后接触到再看: 参考资料: http://blog.sina.com.cn/s/blog_6a1bf1310101hhta.html

2018-01-04 17:39:49

阅读数 12260

评论数 0

原创 ANSI, UTF-8, Unicode, GBK, GB2312 字符编码小结

这两天碰见一个Bug,涉及到字符编码,索性研究了下,整理出来,以便今后查阅。 ASCII码,0~127,128个,这个就不用多说了,他是计算机文明的基石。但是这里面只有英文字母,其他国家如何把本国的文字输入到电脑中呢?所以基本每种语言都有自己的字符集,如汉字就有GB2312(简体中文),BIG5(...

2017-12-27 19:09:51

阅读数 125

评论数 0

原创 size_t

size _t  size_t是unsigned int   为了增强程序的可移植性,便有了size_t ,不同系统上,定义size_t可能不一样。在32位系统中size_t是4字节的,在64位系统中,size_t是8字节的,这样利用该类型可以增加程序移植性。 既然是无符号的,一...

2017-12-27 19:08:17

阅读数 283

评论数 0

原创 随机算法:蒙特卡罗算法和拉斯维加斯算法

随机算法分成两类: 蒙特卡罗算法:采样越多,越近似最优解; 拉斯维加斯算法:采样越多,越有机会找到最优解; 上图区分记忆一下: 蒙特卡罗是一类随机方法的统称,这里摘一段知乎大神(鹌鹑)的概括:(这些蒙特卡罗的应用,肯定对这些有过深刻的了解之后才能总结出来...

2017-12-27 16:03:47

阅读数 1483

评论数 0

原创 安装新版本,全局化的npm和nodejs

我是社会主义的一块砖,哪里需要哪里搬!本周援助一下前端的同学开发: (0)背景知识:先介绍下npm和nodejs,太基础直接复制了: nodejs 简单的说 Node.js 就是运行在服务端的 JavaScript。 Node.js 是一个基于Chrome JavaScript 运行...

2017-12-27 13:56:59

阅读数 998

评论数 0

原创 小数定律,大数定律,中心极限定理的理解和概括

3者有些关系的,先描述下三者的关系,如图: 大数定律,动画演示(下图盗图),描述的是掷骰子,骰子每一面出现的概率是1/6,次数少的时候小数定律,次数多的时候期望接近平均数3.5, 3.5 = 1 * 1/6 + 2 * 1/6 + 3 * 1/6  + 4 * 1/6 + 5 * 1/6 ...

2017-12-27 10:28:25

阅读数 2007

评论数 0

原创 概率论6大基本分布

每天学习一点点: 概率论中的六种常用分布,即(0-1)分布、二项分布、泊松分布、均匀分布、指数分布和正态分布。

2017-12-26 20:16:09

阅读数 22585

评论数 0

原创 先验概率与后验概率

本人习惯用结构化的图例记忆知识,这里记录下先验概率与后验概率:

2017-12-26 18:26:08

阅读数 283

评论数 0

原创 统计学习方法三要素:模型、策略、算法

在读李航的《统计学习方法》,记录一些读书笔记: (一)总览 统计学习方法三要素:模型、策略、算法: (二)一些细节 机构风险其实就是经验风险加上惩罚项: 定义如下: 等式右边第一项是经验风险,最后面一项就是惩罚项,其中J(f)为模型复杂度。 结论: ...

2017-12-26 17:36:48

阅读数 2239

评论数 0

原创 Ubuntu下安装Chrome

执行如下命令: sudo wget http://www.linuxidc.com/files/repo/google-chrome.list -P /etc/apt/sources.list.d/ wget -q -O - https://dl.google.com/linux/linux_s...

2017-12-25 16:04:16

阅读数 126

评论数 0

原创 ping和telnet

搞分布式大数据,还是需要牢固的网络基础的,今天复习下ping和telnet,因为这两个最基础,telnet和ping结合很好查看监控服务器状态的,很多工具就是依靠这些基本命令来实现监控的 。 (一)使用 ping 可以测试到目标机器的连通性。Ping域名还可以得出解析IP。评估网络质量。 ...

2017-12-20 16:27:20

阅读数 715

评论数 0

原创 Kubernetes之kubectl常用命令

kubectl是一个用于操作kubernetes集群的命令行接口,通过利用kubectl的各种命令可以实现各种功能,是在使用kubernetes中非常常用的工具。 (一)pod 对Pod的创建可以通过Yaml或Json格式的配置文件来完成。关于Yaml或Json中都能写哪些参数,参考官网htt...

2017-12-19 15:30:53

阅读数 645

评论数 0

原创 10分钟了解kubernets基本概念

(一)定义 首先,什么是kubernetes? Kubernetes(简称k8s),官网地址:https://kubernetes.io/ 是自动化容器操作的开源平台,这些操作包括部署,调度和节点集群间扩展。 Kubernetes is an open-source system for aut...

2017-12-19 14:03:58

阅读数 568

评论数 0

原创 hadoop-3.0.0集群环境搭建、配置

12月13日hadoop-3.0.0发布正式版啦,试试最新的 Release Notes:Minimum required Java version increased from Java 7 to Java 8 Support for erasure coding in HDFS ...

2017-12-18 20:24:57

阅读数 6677

评论数 4

原创 docker machine 管理目标主机

docker machine 管理目标主机 做为Docker容器集群管理三剑客之一的Docker Machine 大大简化了Docker主机部署的复杂度,极大的方便了开发者管理分布式Docker主机。 插播一段,Docker管理三剑客【本段摘自知乎@ShevYan,有部分删减】...

2017-12-14 10:29:50

阅读数 316

评论数 0

原创 表征学习什么意思?representation learning

representation learning: to learn representations of data that make it easier to extract useful information when building classifiers or other pre...

2017-12-07 16:02:23

阅读数 1664

评论数 0

原创 solve error pydoop.LocalModeNotSupported: ERROR: Hadoop is configured to run in local mode

问题: pip安装pydoop的时候报错: This will solve error pydoop.LocalModeNotSupported: ERROR: Hadoop is configured to run in local mode 解决: 编辑hadoop的配置文件: mapr...

2017-11-23 11:18:12

阅读数 553

评论数 0

原创 3步动态新增hadoop节点

问题: hadoop集群正在运行,怎么动态加一个新的节点呢? 解决: 1、修改 master节点上的hadoop配置文件 /home/cc/hadoop-2.8.2/etc/hadoop/slaves 文件,添加新增的节点 slave3 2、在新增的 slave3 节点执行...

2017-11-22 19:44:39

阅读数 370

评论数 0

原创 3步设置squid,公网访问局域网中的Docker

问题: Linux宿主机的IP:10.10.1.12 (可以访问公网) Docker的IP:172.17.1.2 (运行在Linux宿主机上10.10.1.12 ) 其他可以访问公网的机器(如Windows) 一、在宿主机上安装Squid #安装squid sudo apt-ge...

2017-11-20 16:42:21

阅读数 1135

评论数 0

原创 Try 'apt-get -f install' with no packages (or specify a solution)问题的解决

错误信息如下 ~$ sudo apt-get purge docker-engine Reading package lists... Done Building dependency tree Reading state information... Done You might want t...

2017-11-16 14:34:26

阅读数 1346

评论数 0

提示
确定要删除当前文章?
取消 删除