- 博客(5)
- 收藏
- 关注
原创 Kafka Producer
本文采用Kafka 0.8.2版本 OverviewProducer的作用生成数据(消息),并将其发送到Kafka集群(brokers)中。将消息发送给谁Producer在向Kafka集群发送消息时,需要指定发送到哪一个topic中。除此之外,还可以指定发送到该topic的哪一个partition中。消息的构成一条消息的成分,从逻辑上来说,由真正的消息数据(message)和元数据(metadat
2015-06-30 13:40:44 5193
原创 Kafka High Level Consumer API in Scala
本文目的研究了一下Kafka Produce/Consumer 的API,发现Consumer API的使用并没有那么的straight forward。折腾了2天后,终于摸到了一些门道,这里记录下怎样使用High Level Consumer API来接收并处理一个Topic中的消息。
2015-06-26 14:13:40 4034
原创 Sqoop2基础
安装Sqoop2通过Cloudera Manager的Add a service来安装Sqoop2 Server即可,不需要安装client。试用Sqoop不需要下载client,启动Sqoop2 server之后,直接在CDH中的某个节点上运行命令sqoop2即可。
2015-06-06 09:58:29 3159
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人