大数据组件
虎虎1232
这个作者很懒,什么都没留下…
展开
-
Curator之基础操作
文章目录1.curator 概念2.API1.pom文件2.基本api1.curator 概念zookeeper原生API不得不说,有很多的问题,比如:不能递归创建和删除节点、Watcher只能使用一次、还有很多可以解决分布式应用问题的api(比如分布式锁,leader选举等),但由于ZooKeeper提供的原始API并不是很易用,在其基础上封装一些高级应用又是一件很复杂的事情。这个时候,C...原创 2019-09-07 15:41:33 · 311 阅读 · 0 评论 -
curator 监听数据节点子节点的变化情况
文章目录PathChildrenCacheAPIPathChildrenCacheNodeCache不仅可以监听节点内容变化,还可以监听指定节点是否存在。如果原本节点不存在,那么Cache就会在节点被创建时触发监听事件,如果该节点被删除,就无法再触发监听事件。PathChildrenCache用于监听数据节点子节点的变化情况。APIpackage com.ruozedata.bigd...原创 2019-09-07 16:32:45 · 3721 阅读 · 0 评论 -
zookeeper
文章目录1.zookeeper基本概念2.zookeeper配置修改zoo.cfg的dataDir目录3.zkClils和ls2创建节点创建临时节点sequential不可以递归创建目录版本号变化watch四字命令API1.zookeeper基本概念zk的数据模型:树形结构ZK每个节点znode,有一个唯一的路径标识(/home/hadoop/app/ruozedata.txt)...原创 2019-09-08 14:06:12 · 145 阅读 · 0 评论 -
Flume(一)
文章目录基本概念sourcechannelsink流程基本概念a flume agent is a JVM processsource收集从不同的地方去收集数据avro(****) 序列化execspoolingtaildir(*****)kafkachannel减少磁盘iomemory(****)/file(*****)/kafka/...原创 2019-09-13 15:18:05 · 135 阅读 · 0 评论