HDFS一个文件出现多个小文件的问题

场景一:

在采集数据的时候一个文件上传到HDFS的文件发现都是小文件 原因是hadoop的组件NamaNode出现问题 导致出现小文件得到错误

解决方法:
    1. 将服务器上的Hadoop根目录中 data/ logs 两个文件删除 
        rm -rf data/ logs/
    2. 将NameNode初始化/格式化 
          注意：格式化NameNode，会产生新的集群id，导致NameNode和DataNode的集群id不一致，
          集群找不到已往数据。如果集群在运行过程中报错，需要重新格式化NameNode的话，
          一定要先停止namenode和datanode进程，并且要删除所有机器的data和logs目录，然后再进行格式化。
        hdfs namenode -format
    3.重新开启hadoop 看是否有四个进程433
        ===============hadoop102===============
        13841 NodeManager
        13409 NameNode
        13972 JobHistoryServer
        13567 DataNode
        ===============hadoop103============&#