一、运行任务
### --- 本地模式
~~~ 直接运行会报错:因为没有设置传参
~~~ 直接Idea中运行驱动类即可:idea运行需要传入参数:
~~~ IDEA.Driver传参:WORDCOUNTDRIVER——>edit configuration
~~~ 在program arguments设置参数
~~~ 运行结束,去到输出结果路径查看结果
~~~ 注意本地idea运行mr任务与集群没有任何关系,没有提交任务到yarn集群,
~~~ 是在本地使用多线程方式模拟的mr的运行。
![](https://i-blog.csdnimg.cn/blog_migrate/0251e39940e16d2b0f012001916cb649.png)
![](https://i-blog.csdnimg.cn/blog_migrate/64ce2bec9e02b19a28a43ec8b28e8a01.png)
![](https://i-blog.csdnimg.cn/blog_migrate/fe38aef18c2d2d92053fb5470ab9ee7d.png)
![](https://i-blog.csdnimg.cn/blog_migrate/c63035b64d8eff4580a74e70b91f4cad.png)
二、Yarn集群模式
### --- Yarn集群模式
~~~ 把程序打成jar包,改名为wc.jar;上传到Hadoop集群选择合适的Jar包
~~~ IDEA打成Jar包:右侧——>maven——>wordcount——>lifecycle——>clean——>package——>
![](https://i-blog.csdnimg.cn/blog_migrate/9a2d041641633653bf3a1c7cc214d759.png)
### --- 准备原始数据文件,上传到HDFS的路径,不能是本地路径,因为跨节点运行无法获取数据!!
[root@linux121 ~]# ls
wc.jar wc.txt
### --- 启动Hadoop集群(Hdfs,Yarn)
~~~ 使用Hadoop 命令提交任务运行
[root@linux121 ~]# hadoop jar wc.jar com.yanqi.mr.wc.WordCountDriver /user/yanqi/input /user/yanqi/output
21/08/15 21:29:28 INFO mapreduce.Job: Job job_1628995889675_0001 completed successfully
三、通过dfs查看是否生成数据
![](https://i-blog.csdnimg.cn/blog_migrate/5de3338a5acffec04db99734376695d4.png)
四、Yarn集群任务运行成功展示图
![](https://i-blog.csdnimg.cn/blog_migrate/f381e304612bae7ef095c2a9903d6e0d.png)