![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HBase
sunrising_hill
这个作者很懒,什么都没留下…
展开
-
Spark Hbase 集成
安装Spark和Hbase,将Hbase的lib目录下的jar包复制到Spark目录的jars目录下:cp /apps/hbase/lib/metrics-core-2.2.0.jar /apps/spark/jarscp /apps/hbase/lib/hbase*.jar /apps/spark/jars撰写代码,从hbase中读取数据,再通过RDD转换成Dat原创 2018-01-19 16:47:13 · 716 阅读 · 0 评论 -
Hive集成HBase查询数据表
Hive在HBase的数据表上建立外联表时,尽量将HBase表中可以最快缩小范围的字段作为RowKey的起始字符串,经过测试,这样在查询hive时,如果指定了该字段作为where条件,可以大幅缩短SQL的执行时间。原创 2018-01-19 18:36:00 · 466 阅读 · 0 评论 -
Scala 访问 Hbase
package hbaseimport org.apache.hadoop.conf.Configurationimport org.apache.hadoop.hbase.{HBaseConfiguration, TableName}import org.apache.hadoop.hbase.client.{Connection, ConnectionFactory}/** *...原创 2018-02-23 17:54:39 · 725 阅读 · 0 评论 -
hbase 升级2.1.0
本次hbase从1.2.6升级至2.1.0遇到了两个问题,一个是htrace.jar报错,需要将旧的htrace-core-3.1.0-incubating.jar包上传至hbase-2.1.0的lib目录,另一个问题是jline版本问题,也需要下载高版本jline上传至hbase-2.1.0的lib目录,下载地址:cd /apps/hbase-2.1.0/libwget http:/...原创 2018-08-15 13:53:03 · 1980 阅读 · 0 评论