hadoop
Yeah_zy
这个作者很懒,什么都没留下…
展开
-
大数据技术之Hadoop(HDFS文件系统 API操作HDFS)
API操作HDFS一、HDFS获取文件系统二、HDFS文件上传三、HDFS文件下载四、HDFS目录创建五、HDFS文件夹 和文件 删除六、HDFS文件名更改七、HDFS文件详情查看八、HDFS文件和文件夹判断一、HDFS获取文件系统方法一import static org.junit.Assert.*; import java.net.URI; import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Bloc原创 2020-09-15 09:17:05 · 293 阅读 · 0 评论 -
大数据技术之Hadoop(HDFS文件系统 客户端操作 环境)
这里写目录标题 客户端操作一、环境准备与测试1、jar包准备2、配置HADOOP_HOME环境变量3、检查hadoop 是否配置成功二、创建一个java工程一、环境准备与测试1、jar包准备1)解压win7下编译过的hadoop-2.8.2.tar.gz到非中文目录2)进入share文件夹,查找所有jar包,并把jar包拷贝到_lib文件夹下3)在全部jar包中查找sources.jar,并剪切到_source文件夹。4)在全部jar包中查找tests.jar,并剪切到_test文件夹。2、原创 2020-09-11 17:42:48 · 207 阅读 · 0 评论 -
Hadoop启动停止方式
Hadoop启动停止方式一、各个服务组件逐一启动二、各个模块分开启动(配置ssh是前提)常用三、全部启动(不建议使用)一、各个服务组件逐一启动(1)分别启动hdfs组件hadoop-daemon.sh start|stop namenode|datanode|secondarynamenode(2)启动yarnyarn-daemon.sh start|stop resourcemanager|nodemanager二、各个模块分开启动(配置ssh是前提)常用(1)整体启动/停止hd原创 2020-09-08 16:10:00 · 229 阅读 · 0 评论 -
Hadoop的安装,环境变量的配置
Hadoop 安装一、进入到Hadoop安装包路径下二、解压安装文件到/opt/module下面三、查看是否解压成功四、将hadoop添加到环境变量一、进入到Hadoop安装包路径下[victor@node1 ~]$ cd /opt/software/[victor@node1 software]$ pwd/opt/software二、解压安装文件到/opt/module下面[victor@node1 software]$ tar -xzvf hadoop-2.8.2.tar.gz -C /o原创 2020-09-08 15:47:33 · 4698 阅读 · 0 评论