自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

Widsom的博客

人的原动力来自对未来的美好憧憬

原创 Spark Streaming自定义Receiver类

Spark Streaming自定义Receiver类 1.自定义CustomReceiver class CustomReveicer(host: String, port: Int) extends Receiver[String](StorageLevels.MEMORY_AND...

2018-06-08 12:50:52

阅读数 532

评论数 1

原创 Spark core优化配置参数

Spark core优化配置参数 应用属性 描述 spark.driver.cores 在集群模式下管理资源时,用于driver程序的CPU内核数量。默认为1。在生产环境的硬件上,这个值可能最少要上调到8或16。 spark.driver.maxResultS...

2018-06-08 12:30:27

阅读数 3601

评论数 2

原创 HBase性能优化

HBase性能优化 zookeeper.session.timeout RegionServer与Zookeeper间的连接超时时间。默认3分钟。 当超时时间到后,ReigonServer会被Zookeeper从RS集群清单中移除,HMaster收到移除通知后,会对这台server负责的re...

2018-06-08 12:29:43

阅读数 299

评论数 0

原创 Kafka核心配置参数与机制

Kafka核心配置参数与机制 1. kafka集群安装 kafka集群安装,参考文章: Kafka集群搭建及生产者消费者案例 2. kafka配置参数 broker.id:broker的id,id是唯一的非负整数,集群的broker.id不能重复。 log.dirs:kafka存放数...

2018-06-08 12:28:38

阅读数 4253

评论数 0

提示
确定要删除当前文章?
取消 删除