第一种情况
一问题产生
在linux操作系统下,我们有时打开在windows下的txt文件,发现在windows下能正常显示的txt文件出现了中文乱码。
二分析问题
出现这种情况的原因为两种操作系统的中文压缩方式不同,在windows环境中中文压缩一般为gbk,而在linux环境中为utf8,这就导致了在windows下能正常显示而在linux环境下打开呈现了乱码状态。
三 解决方案:
在linux用iconv命令,如乱码文件名为1-5.txt, 在终端输入如下命令:
$ iconv -f gbk -t utf8 1-5.txt > 1-5.txt.utf8
发现重新生成了一个1-5.txt.utf8文件,打开之后就能正常显示中文了。
四 查看结果:
$cat 1-5.txt.utf8
放入集群中
$hadoop fs -put 1-5.txt.utf8 /market
第二种情况
当 第一种方式无法解决时
首先excel表格转化为txt格式
用txt编译器打开该txt文件 另存为utf-8格式即可