问题:spark读取文本文件转化成JavaRDD后发现中文字符显示乱码。
在spark-shell环境里执行:System.getProperty("file.encoding"),返回GB2312,和文本文件UTF-8编码不一样。
解决:在spark的Java代码中加入字符集设置即可。
//第一步:设置Java环境字符集,避免中文乱码
Properties pps=System.getProperties();
pps.setProperty("file.encoding","UTF-8");