自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

孤独的博客

just do it

原创 Spark Streaming进阶

带状态的算子:UpdateStateByKey 实战:计算到目前为止累积出现的单词个数写入到MySQL中 基于window的统计 实战:黑名单过滤 实战:Spark Streaming整合Spark SQL实战 updateStateByKey算子 需求:统计到目前为止累计出现单词的个数(需要保...

2019-10-25 11:07:35

阅读数 24

评论数 0

原创 Spark Streaming处理案例

Spark Streaming处理socket数据 Spark Streaming处理HDFS文件数据 Spark Streaming处理socket数据 代码 import org.apache.spark.SparkConf import org.apache.spark.streami...

2019-10-25 08:08:32

阅读数 19

评论数 0

原创 Spark Streaming核心

核心概念 Transformations Output Operatioins 核心概念 StreamingContext To initialize a Spark Streaming program, a StreamingContext object has to be create...

2019-10-25 00:29:43

阅读数 24

评论数 0

原创 Spark Streaming入门

概述 应用场景 集成Spark生态系统的使用 发展史 从词频统计功能入手 工作原理 概述 Spark Streaming is an extension of the core Spark API that enables scalable, high-throughput, fault-...

2019-10-24 18:36:12

阅读数 55

评论数 0

原创 整合Flume和Kafka的综合使用

接下来是flume的各个配置文件 avro-memory-kafka avro-memory-kafka.sources = avro-source avro-memory-kafka.sinks = kafka-sink avro-memory-kafka.channels = memor...

2019-10-24 12:26:15

阅读数 24

评论数 0

原创 kafka学习

Kafka架构 producer:生产者,生产馒头(厨师) consumer:消费者,就是吃馒头的(顾客) broker:篮子 topic:主题,给馒头带一个标签,topic的馒头是给一号顾客吃的,topicb的馒头是给二号顾客吃的 Kafka is run as a cluster o...

2019-10-20 14:18:35

阅读数 40

评论数 0

原创 密码学基础之对称密码体制和公钥密码体制

对称密码体制 公钥密码体制 对称密码体制 分组密码的思想:将明文消息编码表示后的数字序列划分为成长为n的组,各组分别在密钥k控制下变换成等长的输出数字序列 DES就是一种分组密码算法,它将明文从算法的一端输入,将密文从另一端输出,由于采用的是对称密钥,因此加密和解密使用相同的算法和密钥,并且加...

2019-10-15 14:26:29

阅读数 106

评论数 0

原创 OSPF路由器邻接的过程

OSPF路由协议,链路状态路由协议的典型代表,最短路径优先协议 OSPF路由器的运行分为5个不同的步骤 建立路由邻接关系 选举一个DR和BDR 发现路由 选举最佳路由 维护路由信息 建立路由邻接关系—初始关系 ...

2019-10-10 22:31:39

阅读数 14

评论数 0

转载 linux用户及用户组管理

创建组: $sudo addgroup ccache 创建用户: $sudo useradd ccache -g ccache -M 创新wfz用户并创建HOME目录,指定用户组为ccache $sudo useradd wfz -g ccache -m 增加已存在用户到指定组 $sudo add...

2019-10-09 17:33:20

阅读数 13

评论数 0

原创 linux下彻底删除mysql(亲测有效)

mysql是真的烦,如果没有卸载完全,后面安装mysql还会受影响,这下子,我来传授给你们彻底删除mysql的绝学(删库跑路的别说我是你们的师父。。。) 直接进入正题。。。 一、使用以下命令查看当前安装mysql的情况 rpm -qa|grep -i mysql 如果显示安装了,就需要删除这些包...

2019-10-06 09:31:41

阅读数 174

评论数 0

提示
确定要删除当前文章?
取消 删除