Hadoop笔记
hadoop知识点总结
数据科学家修炼之道
Life is short, I use Python、Scala、Java、R、Julia、Spark、Flink、Matlab、Spss、Stata、Sas、ML and DL.
展开
-
在Win10安装上Hadoop2.7.5伪分布式集群
环境:Win10 64位 + Java8 + Hadoop2.7.5 为什么不安装Java9? 因为装完了Hadoop,下一步要装Spark,而Spark适配的Scala版本是2.11,而Scala2.11适配Java8。 1. 安装Java8并配置 下载安装 上官网http://www.oracle.com/technetwork/java/javase/downloads/jd...转载 2018-03-28 15:25:30 · 3566 阅读 · 2 评论 -
HDFS常用命令常用
常用HDFS命令 说明 hadoop fs -mkdir dir 新建HDFS目录dir hadoop fs -mkdir -p /dir1/dir2/dir3 建立多层目录 hadoop fs -ls /Input 列出”/Input”目录下的文件和目录 hadoop fs -ls -R /Input 列出”/Input”目录下所有...原创 2018-07-25 14:54:23 · 827 阅读 · 0 评论