![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 90
原来丨
一无所有
展开
-
hadoop分布式文件系统(HDFS)常用API学习
1、org.apache.hadoop.fs.FileSystem 范围 方法 返回值 描述 addDelegationTokens(String renewer, Credentials credentials) Token<?>[] 添加新的token,返回所有的token append(Path f) FSData...原创 2018-04-16 20:29:05 · 2196 阅读 · 1 评论 -
hadoop分布式文件系统(HDFS)常用操作
使用命令hadoop fs可以查看所有的命令,基本上和linux系统命令类似 1、创建文件夹(默认用户根目录)hadoop fs -mkdir peom2、查看文件(可以看到权限,文件所属,以及组属性)hadoop fs -ls /user/lhy 3、将本地文件复制到HDFS中(相对路径也可以)hadoop fs -copyFromLocal ~/Desk...原创 2018-04-11 23:26:12 · 606 阅读 · 0 评论 -
hadoop伪分布式环境搭建
一、下载hadoop并解压官方下载页面地址:http://hadoop.apache.org/releases.html 下载2.7.5版本,并解压,我的解压路径为下图 二、配置hadoop运行环境注意:必须要有java环境 1、编辑环境变量文件 vi ~/.bash_profile 2、文件中添加hadoop环境变量 export HADOOP_HOME=/Users...原创 2018-04-11 18:23:51 · 172 阅读 · 0 评论 -
hadoop版本3.1.0分布式环境下执行mapreduce作业
一、环境配置1、hdfs-site.xml<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property&原创 2018-05-02 19:14:35 · 873 阅读 · 0 评论