![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
文章平均质量分 68
miaomiao_wj0
这个作者很懒,什么都没留下…
展开
-
Hadoop安装
环境:Ubuntu 12.04步骤:1.创建hadoop用户组$ sudo addgroup hadoop2.创建hadoop用户$ sudo adduser -ingroup hadoop hadoop (选择) Is the information correct? [Y/n] Y3.为hadoop用户添加权限$ sudo gedit /etc/s原创 2016-03-08 15:31:33 · 1376 阅读 · 0 评论 -
Hadoop学习笔记——简介及WordCount
注:此文摘自方宸 2013.06.09 pptHadoop简介•Hadoop集群是主从关系:一个Master,多个Slave•Master充当NameNode,管理文件系统,运行着JobTracker,负责整个作业的调度。•Slave充当DataNode,是数据存储的真正所在地,运行着TaskTracker,负责完成由JobTracker分配过来的任务。转载 2016-03-08 09:41:15 · 390 阅读 · 0 评论 -
pig安装
环境:ubuntu12.04 java 1.8 hadoop1.2过程:1.在 http://mirror.bit.edu.cn/apache/pig/ 下载pig-0.15.0 2.解压并放在/opt/pig-0.15.0目录下$tar -zxvf /opt/pig-0.15.0.tar.gz3.配置环境变量$sudo gedit /etc/profile原创 2016-03-08 20:44:51 · 321 阅读 · 0 评论 -
pig学习笔记——运行与语法
1.执行模式local mode在本地模式下,Pig运行在单个JVM中,访问本地系统,适用于处理小规模数据集% pig -x localgrunt>MapReduce mode2.运行Pig程序原创 2016-03-10 10:01:01 · 550 阅读 · 0 评论