HDFS shell commands

hdfs fs命令

hadoop官方手册

显示根目录下所有内容

jj@JJ:~$ hadoop fs -ls /
Found 6 items
drwxr-xr-x   - jj supergroup          0 2021-08-19 22:46 /exm_wdcnt_ha
drwxr-xr-x   - jj supergroup          0 2021-09-14 16:21 /hbase
drwxr-xr-x   - jj supergroup          0 2021-09-14 19:58 /jjProj
drwxrwx---   - jj supergroup          0 2021-08-23 21:13 /tmp
drwxr-xr-x   - jj supergroup          0 2021-08-22 09:39 /user
drwxr-xr-x   - jj supergroup          0 2021-08-19 22:51 /wordcount

创建文件夹

jj@JJ:~$ hadoop fs -mkdir /jjProj

显示hbase文件夹中所有内容

jj@JJ:~$ hadoop fs -ls /hbase
Found 12 items
drwxr-xr-x   - jj supergroup          0 2021-08-23 15:36 /hbase/.hbck
drwxr-xr-x   - jj supergroup          0 2021-09-14 16:21 /hbase/.tmp
drwxr-xr-x   - jj supergroup          0 2021-09-14 19:21 /hbase/MasterProcWALs
drwxr-xr-x   - jj supergroup          0 2021-09-14 16:21 /hbase/WALs
drwxr-xr-x   - jj supergroup          0 2021-08-23 15:36 /hbase/archive
drwxr-xr-x   - jj supergroup          0 2021-08-23 15:36 /hbase/corrupt
drwxr-xr-x   - jj supergroup          0 2021-08-24 11:04 /hbase/data
-rw-r--r--   1 jj supergroup         42 2021-08-23 15:36 /hbase/hbase.id
-rw-r--r--   1 jj supergroup          7 2021-08-23 15:36 /hbase/hbase.version
drwxr-xr-x   - jj supergroup          0 2021-08-23 15:36 /hbase/mobdir
drwxr-xr-x   - jj supergroup          0 2021-09-14 19:41 /hbase/oldWALs
drwx--x--x   - jj supergroup          0 2021-08-23 15:36 /hbase/staging

上传文件edgeData.csv至 jjProj 文件夹中

jj@JJ:~$ hadoop fs -put /home/jj/Documents/JJ-Files/edgeData.csv /jjProj
jj@JJ:~$ hadoop fs -ls /jjProj
Found 1 items
-rw-r--r--   1 jj supergroup        260 2021-09-14 20:05 /jjProj/edgeData.csv

将 jjProj 下的 edgeData.csv 文件输出为文本格式

,u_id,u_label,edgeType,v_id,v_label
0,0,C,1,1,N
1,1,N,1,0,C
2,1,N,1,2,C
3,1,N,1,7,C
4,2,C,1,1,N
5,2,C,1,3,C
6,3,C,1,2,C
7,3,C,1,4,O
8,3,C,1,5,C
9,3,C,1,7,C
10,4,O,1,3,C
11,5,C,1,3,C
12,5,C,2,6,O
13,6,O,2,5,C
14,7,C,1,1,N
15,7,C,1,3,C
16,7,C,2,8,O
17,8,O,2,7,C

在控制台上打印指定文件的全部内容

jj@JJ:~$ hadoop fs -cat /jjProj/edgeData.csv
,u_id,u_label,edgeType,v_id,v_label
0,0,C,1,1,N
1,1,N,1,0,C
2,1,N,1,2,C
3,1,N,1,7,C
4,2,C,1,1,N
5,2,C,1,3,C
6,3,C,1,2,C
7,3,C,1,4,O
8,3,C,1,5,C
9,3,C,1,7,C
10,4,O,1,3,C
11,5,C,1,3,C
12,5,C,2,6,O
13,6,O,2,5,C
14,7,C,1,1,N
15,7,C,1,3,C
16,7,C,2,8,O
17,8,O,2,7,C