Hadoop几个重要的参数配置

core-site.xml 配置项        缺省值        配置说明 hadoop.tmp.dir        /tmp/hadoop-${user.name}        只可以设置一个值；建议设置到一个足够空间的地方，而不是默认的/tmp下，服务端参数，修改需重启 fs.defaultFS        file:///        hdfs://node1:9000 默认文件系统的名称。URI形式。uri's的scheme需要由(fs.SCHEME.impl)指定文件系统实现类。 uri's的authority部分用来指定host, port等。默认是本地文件系统。 io.file.buffer.size        4096        131072 在序列文件中使用的读/写缓冲区的大小。单位kb hdfs-site.xml 配置项        缺省值        配置说明 dfs.blocksize        134217728        块大小的设置。以字节为新文件的默认块大小。您可以使用以下后缀(大小写不敏感):k、m、g、t、p、e来指定大小(比如128k、512m、1g等等)，或者以字节为单位提供完整的大小(如134217728 -> 128 MB)。 dfs.namenode.secondary.http-address        0.0.0.0:50090        node1:50090 SecondaryNameNode地址和端口 dfs.replication        3        数据块副本数。当创建文件时，可以指定复制的实际数量。如果在创建时没有指定复制，则使用缺省值。 dfs.namenode.name.dir        file://${hadoop.tmp.dir}/dfs/name        file:/opt/data/hadoop/hdfs/name 本地磁盘目录，NN存储fsimage文件的地方。可以是按逗号分隔的目录列表，fsimage文件会存储在全部目录，冗余安全。这里多个目录设定，最好在多个磁盘，另外，如果其中一个磁盘故障，不会导致系统故障，会跳过坏磁盘。由于使用了HA，建议仅设置一个。如果特别在意安全，可以设置2个 dfs.datanode.data.dir        file://${ha