Hadoop操作基础与IDE环境配置。
Hadoop操作
目录操作
-
在操作之前,需要在hadoop根目录下创建与Linux用户同名的user目录
./bin/hdfs dfs -mkdir -p /user/hadoop
-
之后,所有的文件都默认放入这个目录下面,很多命令与Linux命令一致,比如查看当前文件夹:
-
这个
input
是这样创建的:./bin/hfs dfs -mkdir input
-
若
/input
,表示在HDFS的根目录创建input
目录
文件操作
本地->Hadoop
-
将本地文件移动到hadoop的input文件夹下:
-
查看Hadoop的input文件夹下的文件:
Hadoop->本地
-
同时,也可以将Hadoop上的文件下载到本地:
Hadoop之间
-
在Hadoop的文件之间进行传输,与Linux上文件传输无异
-
注意,要使用
-cp
命令,一定要确保目标文件夹存在:
配置IDE环境
下载IDEA
-
首先在官网下载IDEA到
Download
: -
然后执行解压命令,解压到
/usr/local