Spark Streaming + Kafka集成指南

https://www.cnblogs.com/frankdeng/p/9308585.htmlKafka项目在版本0.8和0.10之间引入了一个新的消费者API,因此有两个独立的相应Spark Streaming包可用。请选择正确的包, 请注意,0.8集成与后来的0.9和0.10代理兼容,但0....

2018-07-16 00:39:11

阅读数 157

评论数 0

Spark(三)Spark之RDD

https://www.cnblogs.com/frankdeng/p/9301653.html一、RDD的概述1.1 什么是RDD?RDD(Resilient Distributed Dataset)叫做弹性分布式数据集,是Spark中最基本的数据抽象,它代表一个不可变、可分区、里面的元素可并行...

2018-07-14 00:38:19

阅读数 137

评论数 0

PgSQL · 特性分析 · MVCC机制浅析

https://yq.aliyun.com/articles/608911?spm=a2c4e.11153940.bloghomeflow.59.399d291acgr606PgSQL · 特性分析 · MVCC机制浅析摘要: 背景 我们在使用PostgreSQL的时候,可能会碰到表膨胀的问题(关...

2018-07-12 17:09:59

阅读数 407

评论数 0

go语言之行--网络编程、http处理流程详情

https://www.cnblogs.com/wdliu/p/9284459.html一、简介go语言中的网络编程主要通过net包实现,net包提供了网络I/O接口,包括HTTP、TCP/IP、UDP、域名解析和Unix域socket等。和大多数语言一样go可以使用几行代码便可以启动一个服务器,...

2018-07-09 21:52:49

阅读数 173

评论数 0

云主机搭建Kubernetes 1.10集群

https://www.cnblogs.com/aubin/p/9284633.html一、基础环境云主机下载软件包将所有软件下载至/data目录# 链接:https://pan.baidu.com/s/13DlR1akNBCjib5VFaIjGTQ 密码:1l69master到node做免密认证...

2018-07-09 21:48:02

阅读数 348

评论数 0

Spark MLlib 之 aggregate和treeAggregate从原理到应用

https://www.cnblogs.com/xing901022/p/9285898.html在阅读spark mllib源码的时候,发现一个出镜率很高的函数——aggregate和treeAggregate,比如matrix.columnSimilarities()中。为了好好理解这两个方法...

2018-07-09 21:45:29

阅读数 307

评论数 0

Redis Codis 部署安装

https://www.cnblogs.com/zhoujinyi/p/9249873.html背景关于Redis的高可用除了只身的Sentinel和Cluster之外,还有一个用的比较多的是Codis,由于公司的Redis大部分都使用Codis,本文就针对Codis进行相关的安装部署进行说明,来...

2018-07-08 11:17:03

阅读数 165

评论数 0

makefile编译子目录

https://www.cnblogs.com/iclodq/p/9276609.htmlmake子目录常用方法一般是SUB_DIR = lib_src service .PHONY: subdirs $(SUB_DIR) subdirs: $(SUB_DIR) $(SUB_DIR): ...

2018-07-07 14:24:48

阅读数 1327

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭