通常我们在打开spark shell时,会出现这样一个WARN:
WARN NativeCodeLoader:62 - Unable to load native-hadoop library for your platform… using
builtin-java classes where applicable
那出现这个warn的原因就是因为它有一些本地包,如果你想要消除这个warn, 你需要把这个Hadoop
重新在你的机器上编译一下,然后把这个本地包呢替换到spark的目录下面,它就把这个warn消除掉
了。当然,这个WARN也可以不用消除,毕竟它不会影响到程序的执行。