白杨的专栏

选择大于努力,态度决定高度!

Golang Unit Test单元测试

1. Golang单元测试对文件名和方法名要求 文件名必须以xx_test.go命名 方法必须是Test[^a-z]开头 方法参数必须 t *testing.T 2. go test 参数解读   go test是go语言自带的测试工具,其中包含的是两类,单元测试和性能测试。通过go help ...

2016-07-21 11:41:10

阅读数 1619

评论数 0

tmux使用及个性化配置

1. tmux介绍 tmux是一个优秀的终端复用软件,split窗口。可以在一个terminal下打开多个终端。 即使非正常掉线,也能保证当前的任务运行,这一点对于远程SSH访问特别有用,网络不好的情况下仍然能保证工作现场不丢失。SSH重新连接以后,就可以直接回到原来的工作环境,不但提高了工作效率...

2016-07-08 11:30:03

阅读数 10711

评论数 0

Raft一致性协议

0. 写在前面分布式存储系统通过维护多个副本来进行fault-tolerance,提高系统的availability。 带来的代价就是分布式存储系统的核心问题之一:维护多个副本的一致性。 一致性协议就是用来干这事的,即使在部分副本宕机的情况下。Raft是一种较容易理解的一致性协议。 一致性...

2016-07-08 11:27:19

阅读数 682

评论数 0

加密、数字摘要、数字证书、SSL、HTTPS及SSH免密登录

在看一些资料中经常会遇到加密、数字摘要、数字证书、SSL、HTTPS及SSH免密登录这写概念。下面将对加密、数字摘要、数字证书、SSL、HTTPS及SSH免密登录这些领域技术做一个简单介绍。1. 常用技术间的关系 在我们正式开始对每一项技术进行介绍之前,让我们先有一个宏观的认识,下图罗列我们将要涉...

2016-07-08 11:23:09

阅读数 1928

评论数 0

Github 配置SSH KEY

0. 前言很多朋友在用 github 管理项目的时候,都是直接使用 https url 克隆到本地,当然也有有些人使用 SSH url 克隆到本地。然而,为什么绝大多数人会使用 https url 克隆呢? 这是因为,使用 https url 克隆对初学者来说会比较方便,复制 https ur...

2016-07-08 11:20:14

阅读数 2061

评论数 0

Bloom Filter 原理及 Google BloomFilter

1. Bloom Filter简介布隆过滤器 (Bloom Filter)是由Burton Howard Bloom于1970年提出,它是一种space efficient的概率型数据结构,用于判断一个元素是否在集合中。在垃圾邮件过滤的黑白名单方法、爬虫(Crawler)的网址判重模块中等等经常被...

2016-05-25 08:24:47

阅读数 1511

评论数 0

linux free命令使用及解析

1. 命令格式free [参数] 2. 命令功能 free 命令显示系统使用和空闲的内存情况,包括物理内存、交互区内存(swap)和内核缓冲区内存。共享内存将被忽略 3. 命令参数-b  以Byte为单位显示内存使用情况。 -k  以KB为单位显示内存使用情况。 -m  以MB为单位显示内...

2016-05-25 08:20:09

阅读数 755

评论数 0

scala中集合的交集、并集、差集

交集:scala> Set(1,2,3) & Set(2,4) // &方法等同于interset方法 scala> Set(1,2,3) intersect Set(2,4) 并集:scala> Set(1,2,3) ++ Set(2,4) scala>...

2016-05-25 08:09:44

阅读数 2371

评论数 0

变量命名规范

1. 驼峰命名法1.1 小驼峰法 除第一个单词之外,其他单词首字母大写(常用于变量) int myStudentNumber 1.2 大驼峰法(帕斯卡命名法) 每一个单词的首字母都采用大写字母(常用语类名,函数名,属性,命名空间) class StudentFamily 2. 匈牙利命名法...

2016-05-25 08:07:14

阅读数 6627

评论数 1

Virtualenv 快速上手指南

1. virtualenv概述 virtualenv 通过创建独立Python开发环境的工具,来解决依赖、版本以及间接权限问题。比如一个项目依赖Django1.3 而当前全局开发环境为Django1.7,版本跨度过大, 导致不兼容使项目无法正在运行,使用virtualenv可以解决这些问题。 ...

2016-05-25 08:04:00

阅读数 3179

评论数 0

Zipf,Power-laws,Pareto分布

对于在对数坐标系中出现一条直线而言,三种分布都是可能的:Zipf,Power-laws和 Pareto。这三种分布都是用于描述同一种现象:大量事件是稀少的,而一些小事件确是很普遍的。 例如:成绩非常优异的学生是少数,但是成绩中等的学生却很多。(1)Zipf分布描述事件出现平率yy与其由下优先级r...

2016-05-25 08:01:41

阅读数 1658

评论数 0

影响Spark输出RDD分区的操作函数

1. 会影响到Spark输出RDD分区(partitioner)的操作cogroup, groupWith, join, leftOuterJoin, rightOuterJoin, groupByKey, reduceByKey, combineByKey, partitionBy, sort,...

2016-05-01 10:05:13

阅读数 1078

评论数 0

fold/foldLeft/foldRight区别和联系

1. fold介绍从本质上说,fold函数将一种格式的输入数据转化成另外一种格式返回。fold, foldLeft和foldRight这三个函数除了有一点点不同外,做的事情差不多。我将在下文解释它们的共同点并解释它们的不同点。 我将从一个简单的例子开始,用fold计算一系列整型的和。val nu...

2016-05-01 09:59:30

阅读数 2881

评论数 0

Mysql支持的数据类型

1. 数值类型Mysql支持所有标准SQL中的数值类型,其中包括严格数据类型(INTEGER,SMALLINT,DECIMAL,NUMBERIC),以及近似数值数据类型(FLOAT,REAL,DOUBLE PRESISION),并在此基础上进行扩展。扩展后增加了TINYINT,MEDIUMINT,...

2016-05-01 09:54:48

阅读数 8371

评论数 0

Markdown数学符号

Markdown数学符号,Latex数学符号

2016-05-01 09:50:33

阅读数 11679

评论数 7

RESTful API 设计最佳实践

1. 背景REST(英文:Representational State Transfer,表述性状态转移)描述了一个架构样式的网络系统,比如 web 应用程序。 目前互联网上充斥着大量的关于RESTful API(为方便,下文中“RESTful API ”简写为“API”)如何设计的文章,然而却...

2016-05-01 09:30:02

阅读数 8985

评论数 0

GraphX源码解析(Graph构建过程)

1. Graph构建Graph对象是用户的操作入口,主要包含edge和vertex两部分。边是由点组成,所以边中所有的点就是点的全集,但这个全集包含了重复的点,去重后就是VertexRDD。1.1 构建图的方法 从边的集合构建图(Graph.fromEdges)def fromEdges[VD: ...

2016-04-06 15:58:49

阅读数 3566

评论数 0

Leanote 博客详细安装教程

0. 写在前面本教程仅适合Mac, linux用户。1. 下载leanote二进制版下载 leanote 最新二进制版假设将文件下载到 /home/user1下, 解压文件 $> cd /home/user1 $> tar -xzvf leanote-.tar.gz此时在/home/u...

2016-03-30 09:14:02

阅读数 9174

评论数 0

scala中sealed关键字使用指南

1. 防止继承滥用​sealed关键字可以修饰类和特质(特质)。密封类提供了一种约束:不能在类定义的文件之外定义任何新的子类。然而,这样做有什么用呢?在scala源码中List的实现用到了sealed关键字。抽象类List有sealed关键字修饰,接下来Nil和::分别继承了该List抽象类。那我...

2016-03-10 17:22:59

阅读数 3748

评论数 1

基于近邻用户协同过滤算法的音乐推荐系统

0. 摘 要基于近邻用户的协同过滤音乐推荐系统,主要是将与目标用户有相同行为和兴趣爱好的用户,形成一个最近邻的推荐群组,从最近邻推荐群组中产生最终的目标用户推荐列表。该推荐系统通过网络爬虫获取虾米音乐网站真实未脱敏用户的行为信息,采用余弦相似度作为求解相似矩阵的算法,从而为目标用户推荐喜欢的音乐,...

2016-03-03 11:04:12

阅读数 11131

评论数 19

提示
确定要删除当前文章?
取消 删除
关闭
关闭