Hadoop
guanzhongye007
我为人人,人人为我
展开
-
hadoop环境搭建和基本测试
一、环境准备: 1.准备环境 centos 、jdk7(配置环境变量尽量在root/.bashrc,如果配置在/etc/profile或者/root/.bashrc_profile,必须在启动hadoop的时候 需要修改headoop-env.sh添加JAVA_HOME环境变量.,)、其他依赖环境如gcc 2.解压hadoop-2.6.0.tar.gz到usr(我习惯解压到u原创 2017-12-16 16:57:01 · 288 阅读 · 0 评论 -
Hadoop入门案例
一、在上一篇的Hadoop环境准备和基本测试完成之后,再进行入门案例包括字符统计主要是为了熟练运用mapperReduce,其他的、最高城市温度查询、订单联合查询会后续写出 在之前的测试环境上还需要引入两个自定义jar包,Hadoop-yarn、Hadoop-mapperReduce,步骤同之前引入common和hdfs一样,不重复说,接下里需要配置下hadoop的yarn配置, 修改et原创 2017-12-16 18:03:51 · 315 阅读 · 0 评论