eclipse的使用

词频统计

首先，在Linux系统本地创建两个文件，即文件wordfile1.txt和wordfile2.txt。在实际应用中，这两个文件可能会非常大，会被分布存储到多个节点上。但是，为了简化任务，这里的两个文件只包含几行简单的内容。、

文件wordfile1.txt的内容如下：

I love Spark

I love Hadoop

文件wordfile2.txt的内容如下：

Hadoop is good

Spark is fast

假设HDFS中有一个/user/hadoop/input文件夹，并且文件夹为空，请把文件wordfile1.txt和wordfile2.txt上传到HDFS中的input文件夹下。现在需要设计一个词频统计程序，统计input文件夹下所有文件中每个单词的出现次数，也就是说，程序应该输出如下形式的结果：

fast  1

good   1

Hadoop   2

I    2

is   2

love   2

Spark   2

在Eclipse中创建项目

首先，启动Eclipse，启动以后会弹出界面，提示设置工作空间（workspace）。

可以直接采用默认的设置“/home/hadoop/workspace”，点击“OK”按钮。可以看出，由于当前是采用hadoop用户登录了Linux系统，因此，默认的工作空间目录位于hadoop用户目录“/home/hadoop”下。

Eclipse启动以后，

选择“File-->New-->Java Project”菜单，开始创建一个Java工程。