![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 56
迷亭君
寄蜉蝣于天地,渺沧海之一粟。
展开
-
Hadoop,Spark和HIve的启动命令
Hadoop和Spark命令Hadoop启动命令启动HDFS服务start-dfs.shstop-dfs.sh启动YARN服务start-yarn.shstop-yarn.sh启动同时启动start-all.shstop-yarn.shSpark模式Local本地模式先启动hdfs服务start-all.sh或者start-dfs.sh启动交互式服务/export/server/spark-3.0.1-bin-hadoop2.7/bin/spark-shell独立集原创 2022-04-11 23:16:41 · 2896 阅读 · 0 评论 -
Hadoop和Spark中通过网页查看任务执行情况
Hadoop和Spark中通过网页查看任务执行情况HDFS文件系统http://node1:9870任务执行情况http://node1:8088/Spark-On-Yarn模式下,JobHistory的查看JobHistory是用来记录已经运行完成的MapReduce作业日志信息http://node1:19888/Spark-On-Yarn模式下,History Server查看historyserver用来记录作业的信息,包括已经运行完成的和正在运行的http://node1原创 2022-04-12 21:01:57 · 4015 阅读 · 0 评论