Hadoop Linux下txt文件乱码

第一种情况

  一问题产生

   在linux操作系统下，我们有时打开在windows下的txt文件，发现在windows下能正常显示的txt文件出现了中文乱码。

 二分析问题

    出现这种情况的原因为两种操作系统的中文压缩方式不同，在windows环境中中文压缩一般为gbk，而在linux环境中为utf8，这就导致了在windows下能正常显示而在linux环境下打开呈现了乱码状态。

三 解决方案：

      在linux用iconv命令，如乱码文件名为1-5.txt， 在终端输入如下命令：

       $  iconv -f gbk -t utf8 1-5.txt > 1-5.txt.utf8 

       发现重新生成了一个1-5.txt.utf8文件，打开之后就能正常显示中文了。

 四 查看结果:

 $cat  1-5.txt.utf8

 放入集群中

$hadoop  fs -put     1-5.txt.utf8   /market

第二种情况

当 第一种方式无法解决时

首先excel表格转化为txt格式

用txt编译器打开该txt文件 另存为utf-8格式即可