- 博客(3)
- 收藏
- 关注
原创 kudu内部机制
1. kudu:面向结构化数据的开源的table存储引擎,支持低延迟的随机存取以及高效的分析处理2. kudu的内部实现原理如图所示:3. kudu通过水平分区来实现数据的分布式存储,存储以每个partition即tablet为单位,并基于raft协议解决多个partition副本的一致性问题4. kudu表会指定其所有column的一个有序子集为primary key,作
2018-01-16 14:45:51 6756 3
原创 kudu使用方法
1.1 kudu使用方法(1)可通过Java client、C++ client、Python client操作kudu表,但要构建client并编写应用程序;(2)可通过kudu-spark包集成kudu与spark,并编写spark应用程序来操作kudu表;(3)可通过impala的shell对kudu表进行交互式的操作,因为impala2.8及以上的版本已经集成了对kudu的操作
2018-01-16 14:29:10 33614 5
原创 kudu安装过程
1.1 Linux要求如果使用RHEL/CentOS的Linux,版本必须在6及以上;操作系统支持hole punching capabilities(版本高于6.4);使用xfs 或者 ext4 格式化的驱动器;安装ntp服务;1.2部署计划kudu的部署采用主从结构,master节点运行master server,slave节点运行tablet server,本案例的部
2018-01-16 10:19:07 4804
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人