Hadoop
文章平均质量分 86
lgshendy
这个作者很懒,什么都没留下…
展开
-
适合国内网速的CDH5安装
0.集群规划说明:由于CDH可以方便的动态添加删除主机,动态改变主机上的服务,所以后面再对各机器上跑得服务进行分配。共三台机器操作系统: centos6.5机器名:work01、work02、work03work03运行Cloudera Manager1.关闭防火墙 和 SELinux 说明:如果不关闭,集群间通信可能会出问题,造成服务不能正常...原创 2015-04-27 14:44:16 · 783 阅读 · 0 评论 -
实战:在Java Web 项目中使用HBase
文章来自:http://my.oschina.net/lanzp/blog/398644在 此之前我们使用Mysql作为数据源,但发现这数据增长速度太快,并且由于种种原因,因此必须使用HBase,所以我们要把Mysql表里面的数据迁移到 HBase中,在这里我就不讲解、不争论为什么要使用HBase,HBase是什么了,喜欢的就认真看下去,总有些地方是有用的 我们要做的3大步骤...原创 2015-04-27 14:52:17 · 365 阅读 · 0 评论 -
使用Maven搭建Hadoop开发环境
文章来自:http://blog.csdn.net/kongxx/article/details/42339581 关于Maven的使用就不再啰嗦了,网上很多,并且这么多年变化也不大,这里仅介绍怎么搭建Hadoop的开发环境。1. 首先创建工程[plain] view plaincopyprint?mvn archetype:generate -Dgroup...原创 2015-04-27 14:54:57 · 264 阅读 · 0 评论 -
Hadoop-2.6.0+Zookeeper-3.4.6+Spark-1.3.1+Hbase-1.1.0+Hive-1.2.0集群搭建
文章来自:http://blog.csdn.net/u013327467/article/details/45675705 自序这些都是笔者半年的结晶,现将其整理为博客,供各位网友参考。博客内容分为五个部分,如下: Ubuntu物理机和虚拟机准备 ssh登录和jdk安装 Hadoop-2.6.0+zookeeper-3.4.6 集群搭建 Spark-1.3.1集...原创 2015-05-26 14:27:39 · 223 阅读 · 0 评论 -
elasticsearch之hadoop插件使用
转自:http://bigbo.github.io/pages/2015/02/28/elasticsearch_hadoop/?utm_source=tuicool&utm_medium=referral elastic与Hadoop的连接几个月前,由于资源有限,而需求无限,不得已想到es与hadoop的连接,本来想的很好,尝试把HDFS作为es的存储后端,把index...原创 2016-03-12 20:59:35 · 299 阅读 · 0 评论 -
hadoop 2.0 详细配置教程
创建账户使用root登 陆 所有机器后,所有的机器都 创建 hadoop 用 户useradd hadooppasswd hadoop此 时 在 /home/ 下就会生成一个 hadoop 目 录 ,目 录 路径 为 /home/hadoop创建相关的目录定 义 需要数据及目 录 的存放路径定 义 代 码及工具 存放的路径mkdir -p /ho...原创 2016-03-18 15:54:33 · 147 阅读 · 0 评论