hbase
Cumu_
这个作者很懒,什么都没留下…
展开
-
HBase全分布式环境搭建
1. 首先安装hbase之前必须要有原创 2014-08-17 16:56:25 · 2709 阅读 · 0 评论 -
hadoop+hbase全分布式环境配置
1. hadoop: http://blog.csdn.net/jthink_/article/details/386222972. hive: http://blog.csdn.net/jthink_/article/details/386235853. zookeeper: http://blog.csdn.net/jthink_/article/details/3863997原创 2014-08-17 17:02:43 · 1471 阅读 · 0 评论 -
zookeeper安装
1. 首先下载zookeeper-3.4.5.tar.gz, 解压到/usr/local/bg文件夹下2.原创 2014-08-17 16:35:59 · 2660 阅读 · 0 评论 -
hadoop+hive+zookeeper+hbase全分布式环境配置
1. hadoop: http://blog.csdn.net/jthink_/article/details/386222972. hive:原创 2014-08-17 17:01:13 · 7071 阅读 · 1 评论 -
flume学习03-flume收集log4j日志
前几篇已经介绍了flume相关的知识,包括flume架构、如何配置启动以及暂停,接下去主要说说flume接受log4j日志。 前面介绍过了log4j需要用avro的方式讲日志传递到flume,所以我们的配置都是基于avro的sourcelog4j日志输出到flume的console修改配置文件log4j-agent.properties# distributed with this work原创 2015-02-13 17:18:58 · 8823 阅读 · 0 评论 -
spark学习7-mllib als推荐引擎学习
继续上一篇学习spark本次将介绍下如何利用mllib进行商品或者用户的推荐,具体用到的算法是ALS(交替二乘法)推荐算法介绍推荐算法可以分为:UserCF(基于用户的协同过滤)、ItemCF(基于商品的协同过滤)、ModelCF(基于模型的协同过滤),具体介绍见:http://blog.csdn.net/ygrx/article/details/15501679spark中的协同原创 2015-10-15 16:26:36 · 9858 阅读 · 1 评论 -
disconf-基于xml分布式配置管理hbase
本文介绍如何使用disconf管理hbase的配置新建hbase.properties,内容为:# hbase confighbase.quorum=iphdfs.namenode.host=iphdfs.namenode.port=8020hbase.contrast.trans.table=contrast_trans新建hbase.xml,内容为:xml versio原创 2016-01-26 16:37:54 · 1344 阅读 · 2 评论 -
hive udf写hbase
最近遇到新的需求,需要将hive脚本运行输出的结果存入hbase,故写出一个通用的hive udf来满足该需求,具体代码如下:import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HBaseConfiguration;import org.apache.hadoop.hbase.TableN原创 2016-02-24 10:36:18 · 2625 阅读 · 3 评论 -
自定义spring-boot-starter-hbase
项目背景代码DubboAutoConfigurationDubboPropertiesDubboServicespringfactoriesgithub地址打包使用方式依赖集成使用生产者消费者项目背景公司越来越多的项目采用spring-boot+dubbox的soa服务架构,由于dubbox本身没有spring-boot的starter,故写出一个spring-boot-原创 2017-03-21 15:52:30 · 6546 阅读 · 5 评论