- 博客(2)
- 收藏
- 关注
原创 SparkStreaming Direct模式总结
Direct模式1.并不需要单独线程实时接收数据,而是每隔batch size时间抓取数据2.kafka相当于文件系统,每个分区相当于从hdfs中读取数据时的每个block块,Dstream的分区和kafka的分区是相同的,要改变并行度必须要重新分区重新分区会有shuffle。3.读取kafka中的数据之后不需要更新offset到zookeeper而是spark自己管理,把offset
2017-12-05 22:42:37 2030
原创 java构造器 和初始化块
一:初始化块 java类中可以有多个初始化块 : 初始化块是先写先执行 初始化块的语法格式 [修饰符]{ //可执行性代码 } 修饰符只能是 static 因为 初始化块没有名字 所以不能通过类来调用初始化块 只能在创建java对象时隐式调用 而且在构造器之前执行 虽然初始化块和构造器很相似但是还是会有一定的区别的与构造器不同的是 初始
2013-12-29 22:24:29 446
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人