- 博客(10)
- 收藏
- 关注
原创 scala语言的一些特技
用scala语言做spark项目也有一年了,虽然scala语言也是运行在jvm上面,但其是动态语言,还有很多之前从来没见过的特技,这里写这篇文章记录一下。1.case class样例类case class样例类初始化的时候不需要用new来初始化,而且此样例类自带了toString,hascode,equals等方法,这个样例类最多的用途是用来做模式匹配 case class P
2017-09-14 16:48:30 301
原创 kafka的相关要点总结
1.kafka每个节点叫做broker,producer向kafka发送消息时,是将消息发送给指定的topic。同时每个topic下面还细问分partition,具体到每条消息细分到哪个partition,是根据消息的key参数以及配置的partition规则来的,由于多个partition的存在,所以针对同一个topic,其吞吐量更高,并发性也越强2.partition中消息都是直接追加写到
2017-06-24 17:02:10 532
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人