![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
AAAhxz001
永远在路上
展开
-
解决Hadoop启动时的警告
如图所示,Hadoop启动时有警告就很烦!解决办法:首先vim /usr/local/hadoop/bin/Hadoop-config.sh,更改为如图所示:然后vim /etc/profile,最后加上如图所示语句此时需要更新一下 :source /etc/profile完成!...原创 2019-11-29 18:34:55 · 946 阅读 · 0 评论 -
第一个MapReduce测试程序
实验环境:centos7,Hadoop1.2,jdk1.6,VMware Workstation Pro启动Hadoop:start-all.sh看到有5个进程启动了就表示配置成功了。这5各进程分别是: namenode、datanode、secondarynamenode、jobstracker、tasktracker。 可以使用命令:jps来查看进程的使用情况。如果出现这种情况,就说明启...原创 2019-11-29 18:25:32 · 759 阅读 · 0 评论 -
Linux下Hadoop安装
1、安装JDK(1)将jdk-8u191-linux-i586.rpm文件复制到“/usr/local”文件夹中,可以双击安装(这种方式简单,但是路径不能自定义,需要找到jdk的安装路径,所以建议使用命令行方式,可以指定路径,练习命令行的使用),也可以使用命令行的方式,首先进入到“/usr/local”路径中,键入命令:rpm –ivh –-prefix=/usr/java/ jdk-8u191...原创 2019-11-22 12:19:14 · 166 阅读 · 1 评论 -
Hadoop HDFS shell命令
HDFS简介HDFS是Hadoop生态系统中文件分布式系统,HDFS被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时,它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统,适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问,非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX...原创 2019-11-22 12:13:36 · 295 阅读 · 0 评论 -
Hadoop作用
Hadoop的作用:Hadoop就是存储海量数据和分析海量数据的工具。原创 2019-08-30 08:45:33 · 1353 阅读 · 0 评论