大数据分析（hadoop+zookpeer+hbase）

hadoop配置文件

core-site.xml

文件在etc文件夹下

<configuration>
    <!-- 指定HDFS老大（namenode）的通信地址 -->
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://172.16.100.6:9000</value>
    </property>
    <!-- 指定hadoop运行时产生文件的存储路径,路径需要自己提前创建 -->
    <property>
        <name>hadoop.tmp.dir</name>
        <value>/home/yida/bigdata-cluster/hadoop/data</value>
    </property>
<property>
        <name>hadoop.http.filter.initializers</name>
        <value>org.apache.hadoop.security.AuthenticationFilterInitializer</value>
    </property>

    <!-- 定义用于HTTP web控制台的身份验证。支持的值是:simple | kerberos | #AUTHENTICATION_HANDLER_CLASSNAME# -->
    <property>
        <name>hadoop.http.authentication.type</name>
        <value>simple</value>
    </property>

yarn-site.xml

<property>
                <!--指定yarn的老大 resoucemanager的地址-->
                <name>yarn.resourcemanager.hostname</name>:
                <value>172.16.100.6</value>
        </property>
        <!--配置 NodeManager 上运行的附属服务。需要配置成 mapreduce_shuffle 后才可以在 Yarn 上运行 MapReduce 程序。-->
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>

  <property>
    <name>yarn.resourcemanager.webapp.address</name>
    <value>${yarn.resourcemanager.hostname}:9527</value>
</property>