Hbase-Skill
文章平均质量分 82
详细描述了Hbase的架构以及应用
一只懒得睁眼的猫
励志成为一个技术大牛!
展开
-
Hive与Hbase关系整合
近期工作用到了Hive与Hbase的关系整合,虽然从网上参考了很多的资料,但是大多数讲的都不是很细,于是决定将这块知识点好好总结一下供大家分享。 本篇文章在具体介绍Hive与Hbase整合之前,先给大家用一个流程图介绍Hadoop业务的开发流程以及Hive与Hbase的整合在业务当中的必要性。 其中在数据存入hbase—>Hive对数据进行统计分析的这个步骤中就涉及到了Hive原创 2016-06-05 10:16:59 · 16800 阅读 · 5 评论 -
Hbase调试时遇到的问题总结
问题1:在hbase中不能创建表,并抛出异常: ERROR: Can’t get master address from ZooKeeper; znode data == null 解决措施: (1)停止所有服务,只看到有jps (2)删除掉所有zk节点的/data/zookeeper的version-2目录和文件,只保留myid文件。 (3)删除掉所有hadoop节点的tmp和logs目录原创 2016-07-18 10:24:26 · 1724 阅读 · 0 评论 -
HBase Shell输入命令无法删除问题的解决技巧
问题:通过SecureCRT对hbase进行shell操作时,命令行无法删除。 解决方案: 问题得到解决!原创 2016-07-14 08:52:06 · 1353 阅读 · 0 评论 -
Hbase架构以及应用介绍
Hbase全称为Hadoop Database,即Hbase是Hadoop的数据库,是一个分布式的存储系统。Hbase利用Hadoop的HDFS作为其文件存储系统,利用Hadoop的MapReduce来处理Hbase中的海量数据。利用zookeeper作为其协调工具。 本篇文章将重点介绍Hbase三个方面的内容:Hbase体系结构(架构)的介绍、Hbase shell的操作、Hbase的Ja原创 2016-05-18 14:30:42 · 11772 阅读 · 2 评论 -
HBase结合MapReduce批量导入
Hbase是Hadoop生态体系配置的数据库,我们可以通过HTable api中的put方法向Hbase数据库中插入数据,但是由于put效率太低,不能批量插入大量的数据,文本将详细介绍如何通过MapReduce运算框架向Hbase数据库中导入数据。 开篇先介绍业务场景:将电信手机上网日志中的数据导入到Hbase数据库中,将部分数据以及相应字段描述列出:原创 2016-05-14 14:27:33 · 13173 阅读 · 0 评论