hadoop conf中xml文件修改

 core-site.xml

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
  <property>-------指定NameNode主机名与端口号
    <name>fs.default.name</name>
    <value>hdfs://localhost:9000</value>
  </property>
  <property>
    <name>hadoop.tmp.dir</name>
    <value>/opt/data/tmp</value>
  </property>
</configuration>

hdfs-site.xml

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

<!-- Put site-specific property overrides in this file. -->

<configuration>
  <property>-------设置HDFS的副本数
    <name>dfs.replication</name>
    <value>1</value>
  </property>
  <property>
    <name>dfs.permissions</name>
    <value>false</value>
  </property>
</configuration>

mapred-site.xml

 

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>

 

<!-- Put site-specific property overrides in this file. -->

 

<configuration>
  <property>-------指定JobTracker的主机与端口号
    <name>mapred.job.tracker</name>
    <value>localhost:9001</value>
  </property>
</configuration>

masters---------指定SecondaryNameNode的位置

localhost

slavers----------指定DataNode和TaskTracker的位置

localhost

格式化

[hadoop@localhost bin]$ hadoop namenode -format

 

转载于:https://www.cnblogs.com/longjshz/p/4396522.html

Hadoop的Core-site.xml文件,你可以存储核心应用程序的全局配置,例如HDFS和YARN的默认设置。以下是修改Core-site.xml步骤: 1. **定位文件位置**:首先找到Hadoop安装目录下的`conf`文件夹,`core-site.xml`一般位于`conf/core-site.xml`。如果是在分布式集群环境下,可能每个节点的`conf`目录下都有这个文件。 2. **备份原文件**:为了防止意外,建议先创建文件的备份。可以在`conf`目录下新建一个文件,如`core-site.xml.bak`,然后复制原有文件过去。 3. **编辑文件**:使用文本编辑器(如`vi`, `nano`, `gedit` 或者 `notepad++` 等)打开`core-site.xml`。注意,由于XML格式的要求,最好保持良好的缩进和标签对齐。 4. **查找并修改所需项**:在文件搜索你想要更改的配置项。例如,如果你要修改HDFS的副本因子(replication factor),可能会在 `<property>` 标签下看到类似这样的配置: ```xml <property> <name>dfs.replication</name> <value>3</value> </property> ``` 修改`<value>`部分为你想要的新值。 5. **保存并关闭**:完成修改后,记得保存并关闭文件。在保存前,最好预览一下文件确认没有语法错误。 6. **生效新配置**:在修改完成后,需要重启Hadoop的服务(如`hdfs-namenode` 和 `yarn-resourcemanager`)才能让新配置生效。在单机模式下可以执行`sbin/start-all.sh`(停止后再启动),在集群环境通常需要在每个节点上分别操作。 7. **验证配置**:可以用`hadoop config`命令或者Hadoop应用的日志来确认新的配置已经生效。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值