hadoop基本common代码

Hadoop简单介绍

Hadoop主要解决海量数据的存储和海量数据的分析计算问题

具体详细介绍看下面这篇文章

Hadoop 入门教程（超详细）_西门催学不吹雪的博客-CSDN博客

---

前言 

在写代码之前需要先了解一些基本命令

hdfs dfs -ls /	此命令用于列出所有文件。 使用 lsr 进行递归方法。 当我们想要文件夹的层次结构时，它很有用。
hdfs dfs -mkdir /mine	创建目录。 在 Hadoop dfs 中，默认情况下没有主目录。 因此，让我们首先创建它。
hdfs dfs -put /tools/a.txt /mine	将文件/文件夹从本地磁盘复制到 HDFS。 On put 命令指定要从中复制的本地文件路径，然后指定要复制到 hdfs 上的 hdfs-file-path。
hdfs dfs -touch /mine/abc.txt	它用于创建没有任何内容的文件。 使用 touch 命令创建的文件是空的。 将 URI 指定的文件的访问和修改时间更新为当前时间，如果文件不存在，则在 URI 处创建一个长度为零的文件，并将当前时间作为该 URI(统一资源标识符) 的时间戳。
hdfs dfs -copyFromLocal /tools/AI.txt /niit	将文件/文件夹从本地文件系统复制到 hdfs 存储。 这是最重要的命令。 本地文件系统是指操作系统上存在的文件。
hdfs dfs -cat /niit/AI.txt	打印文件内容
hdfs dfs -copyToLocal  /niit   /tools/hero	将文件/文件夹从 hdfs 存储复制到本地文件系统
hdfs dfs -moveFromLocal  /tools/cutAndPaste.txt   /niit	此命令会将文件从本地移动到 hdfs。
hdfs dfs -cp /niit  /niit_copied	此命令用于在 hdfs 中复制文件。 让我们将文件夹