![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
天空中的一缕微风
加油可以的哦
展开
-
win 10 + maven + idea 15 + Hadoop 2.7.3开发环境配置
前言今天想在win 10上搭一个Hadoop的开发环境,希望能够直联Hadoop集群并提交MapReduce任务,这里给出相关的关键配置。步骤关于maven以及idea的安装这里不再赘述,非常简单。在win 10上配置Hadoop 将Hadoop 2.7.3直接解压到系统某个位置,以我的文件名称为例,解压到E:\大数据平台\hadoop\hadoop-2.7.3中 配置HADOOP_HOME以及原创 2016-12-17 14:35:30 · 9287 阅读 · 2 评论 -
MapReduce之WordCount
package org.alipay.study.hadoop;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.LongWritable;import原创 2016-08-23 18:58:17 · 601 阅读 · 0 评论 -
Hadoop 2.x高可用配置
前言这两天整理了一下原来写的各种文档,准备陆陆续续全部写成博客,以防文档丢失,第一篇,使用zookeeper来实现Hadoop的高可用主机规划此处有三台主机,规划如下:主机名 IP地址 运行进程hadoop 192.168.201.243 NameNode、ResourceManager、JournalNode、QuorumPeerMain、原创 2016-03-04 21:50:28 · 1006 阅读 · 0 评论 -
HBase-0.98集群安装
前言HBase集群的安装依赖于zookeeper,因为它的root表信息要保存在zk上,因此我们需要Hadoop高可用安装时的zookeeper集群安装将hadoop中配置文件目录中的hdfs-site.xml和core-site.xml拷贝到hbase/conf下修改hbase-env.shexport JAVA_HOME=/usr/jdk/jdk8//禁用hbase自带的zkexport原创 2016-03-04 23:06:25 · 598 阅读 · 0 评论