11.Hadoop_入门_历史服务器配置

最新推荐文章于 2022-01-07 21:28:37 发布
最新推荐文章于 2022-01-07 21:28:37 发布
阅读量3.5k 收藏
点赞数 2
分类专栏： CentOS 7 大数据 Hadoop 文章标签： hadoop 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_25400167/article/details/117327981
版权

历史服务器配置

提示：以下是本篇文章正文内容，下面案例可供参考

为了查看程序的历史运行情况，需要配置一下历史服务器。具体配置步骤如下：

1.配置 mapred-site.xml

在这里插入图片描述

插入以下内容

<!-- 历史服务器端地址 -->
<property>
	<name>mapreduce
最低0.47元/天 解锁文章
知趣乄
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
大数据技术之Hadoop3.x
qq_25400167的博客
05-11 6965
大数据技术之Hadoop3.x教程系列文章目录 文章目录大数据技术之Hadoop3.x教程系列文章目录一、[1.在虚拟机VMware安装模板机Hadoop100（使用CentOS 7系统](https://blog.csdn.net/qq_25400167/article/details/116458417)二、[2.Hadoop模板机IP地址和主机名称配置](https://blog.csdn.net/qq_25400167/article/details/116504080)三、[3.使用Xshell
hadoop入门（八）：配置历史服务器与查看
全栈川川
08-28 928
Hadoop历史服务器配置与查看
4.2.Hadoop快速入门
IT瘾君子的博客
01-07 376
HADOOP概述、HADOOP概述、YARN&MAPREDUCE、HADOOP概念扩展
02.hadoop入门
杨小迪的博客
09-06 810
一.离线分析Hadoop 1.Hadoop 概述 (1).Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 (2).主要解决，海量数据的存储和海量数据的分析计算问题。 (3).广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 2.Hadoop发展历史 (1).Hadoop创始人Doug Cutting，为 了实 现与Google类似的全文搜索功能，他在Lucene框架基础上进行优化升级，查询引擎和索引引擎。 (2).2001年年底Lucene成为Apache基金会
hadoop_join.jar.zip_hadoop_hadoop query_reduce
09-20
The Joins query by using Hadoop and map reduce
mapred.zip_hadoop_hadoop mapreduce_mapReduce
09-20
hadoop mapreduce测试样例，文档，源码
HDFS.zip_Hadoop 平台_hadoop_hdfs
09-21
该代码是介绍了如何在搭好的hadoop平台上，实现对文件的操作
hadoop2.7.x_winutils_exe&&hadoop_dll
06-01
hadoop2.7.x_winutils_exe&&hadoop_dll
hadoop_class-master.zip_Master Class_hadoop_社交
09-24
部分简单hadoop代码,包括社交三角形统计、倒排索引等
9.Hadoop_入门_集群配置
qq_25400167的博客
05-20 6328
1.切换到配置文件目录 cd /opt/module/hadoop-3.1.3/ cd etc/hadoop/ 2.配置 core-site.xml vim core-site.xml 按O插入以下内容 <!-- 指定 NameNode 的地址 --> <property> <name>fs.defaultFS</name> <value>hdfs://hadoop102:8020</value> </proper
12.Hadoop_入门_日志聚集功能配置
qq_25400167的博客
05-30 6067
1.引入库 2.读入数据 总结 以上就是今天要讲的内容。
10.Hadoop_入门_群起集群并测试
qq_25400167的博客
05-23 5808
1.配置 workers cd opt/module/hadoop-3.1.3/etc/hadoop/ 编辑workers vim workers 默认为localhost，删除localhost，插入以下内容： hadoop102 hadoop103 hadoop104 注意：该文件中添加的内容结尾不允许有空格，文件中不允许有空行。 2.格式化 NameNode hdfs namenode -format 如果集群是第一次启动，需要在 hadoop102 节点格式化 NameNode（
3.Hadoop_入门_使用Xshell连接CentOS 7
qq_25400167的博客
05-10 5444
使用Xshell连接CentOS 7 提示：以下是本篇文章正文内容，下面案例可供参考 1.进入 C:\Windows\System32\drivers\etc 路径 代码如下： 192.168.10.100 hadoop100 192.168.10.101 hadoop101 192.168.10.102 hadoop102 192.168.10.103 hadoop103 192.168.10.104 hadoop104 192.168.10.105 hadoop105 192.168.10.106
1.Hadoop_入门_模板虚拟机安装（使用CentOS 7系统）
qq_25400167的博客
05-06 5339
Hadoop 3.x系列文章目录 提示：这里可以添加系列文章的所有文章的目录，目录需要自己手动添加 例如：第一章 Python 机器学习入门之pandas的使用 提示：写完文章后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录Hadoop 3.x系列文章目录一、安装VMware虚拟机二、在虚拟机VMware安装模板机Hadoop100（使用CentOS 7系统）步骤1.打开虚拟机，点击创建新的虚拟机2.新建虚拟机向导（选择自定义）3.选择虚拟机硬件兼容性（根据自己安装的软件版本选择）4.安装客户
6.配置JDK环境变量和Hadoop环境变量
qq_25400167的博客
05-17 5176
1.连接Hadoop102 使用Xshell连接Hadoop102,链接之后切换到/opt/software目录 2.上传jdk-8u212-linux-x64.tar.gz 点击新建文件传输 找到已经下载的jdk-8u212-linux-x64.tar.gz，并拖动到Hadoop102窗口，完成之后关闭，并查看是否传输成功 3.解压JDK 使用下方命令解压jdk-8u212-linux-x64.tar.gz到/opt/module/目录 代码如下： tar -zxvf jdk-8u
5.Hadoop_入门_克隆三台虚拟机
qq_25400167的博客
05-12 5064
Hadoop_入门_克隆三台虚拟机 1.克隆之前关闭虚拟机 2.右键–管理—克隆 Hadoop103、Hadoop103也是同样的方法克隆，克隆完成后移除Hadoop100 3.打开Hadoop102 4.root用户登录 5.打开终端 6.修改IP地址 vim /etc/sysconfig/network-scripts/ifcfg-ens33 IPADDR=192.168.10.102 7.修改主机名称 vim /etc/hostname 完成之后重启 re
2.Hadoop_入门_模板机IP地址和主机名称配置
qq_25400167的博客
05-08 5053
Hadoop模板机IP地址和主机名称配置 提示：以下是本篇文章正文内容，下面案例可供参考 1. 如下（图例）： 2. 如下（图例）： 3. 如下（图例）： 4. 如下（图例）： 5. 如下（图例）： 6. 如下（图例）： 7. 如下（图例）： 8. 如下（图例）： 9. 如下（图例）： 10. 如下（图例）： 11.打开虚拟机，打开终端，切换root账户 代码如下： su root 如下（图例）： 12.编辑ifcfg-ens33文件 代码如下： vim /etc/sysconf.
7.Hadoop_入门_xsync分发脚本
qq_25400167的博客
05-19 4811
1.在/home/atguigu/bin 目录下创建 xsync 文件 cd /home/atguigu mkdir bin cd bin vim xsync 插入以下内容: #!/bin/bash #1. 判断参数个数 if [ $# -lt 1 ] then echo Not Enough Arguement! exit; fi #2. 遍历集群所有机器 for host in hadoop102 hadoop103 hadoop104 do echo ==
WARNING log4j.properties is not found. HADOOP_CONF_DIR may be incomplete
最新发布
05-25
1. 找到 Hadoop 的配置目录，通常在 $HADOOP_HOME/etc/hadoop/ 目录下。 2. 在该目录下创建 log4j.properties 文件。 3. 编辑 log4j.properties 文件，添加以下内容： ``` log4j.rootLogger=DEBUG, stdout # ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

知趣乄

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值