2016年11月_login_sonata

12月 11月 10月

转载 HBase的LSM树存储模型

本文转载自：http://blog.csdn.net/dbanote/article/details/8897599 LSM树是Hbase里非常有创意的一种数据结构，它和传统的B+树不太一样，下面先说说B+树。1 B+树相信大家对B+树已经非常的熟悉，比如Oracle的普通索引就是采用B+树的方式，下面是一个B+树的例子：根节点和枝节点很简单，分别记录每个叶子节点的最小值，并用一个指针指向叶

2016-11-28 18:35:17 1155

原创 java操作HBase增删改查基础

完整代码在最后部分，有注释，可以直接跳过去看代码。环境是我之前搭的Hadoop和hbase，详见：分布式HBase安装配置和基础学习，但是他们在虚拟机里，eclipse在win10，所以要在win下添加虚拟机的ip映射（这一步或许不需要，看实际情况），修改C:\Windows\System32\drivers\etc\hosts文件，添加：10.4.20.49 Master10.4.20.

2016-11-28 13:07:53 1393

原创分布式HBase安装配置和基础学习

一、HBase简介HBase是一个高可靠性、高性能、面向列、可伸缩、实时读写的分布式数据库（实时、分布式、高维数据库）。它利用HDFS作为文件存储系统，用mp来处理数据，利用zookeeper作为其分布式协同服务，主要用来存储非结构化和半结构化的松散数据。因为HBase是基于Hadoop的，所以捎带提一下Hadoop生态系统：Flume：数据收集工具，收集客户端产生的小

2016-11-18 21:58:09 973

原创 Hive的安装配置和连接mysql

一、基础介绍Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件（存储在hdfs中）映射为一张数据库表，并提供类SQL查询功能，通过使用hive的sql脚本来操作数据（hql），本质是将SQL转换为MapReduce程序。它包括解释器（把脚本解释成java代码），编译器（编译java代码，其实就是mapreduce代码，提交到hadoop），优化器等。hive运行时，

2016-11-15 22:16:37 13130 1