qq_41301707的博客

Spark总结一 .Spark介绍二.Spark与MapReduce、storm的区别三.RDD 1.RDD介绍 2.RDD五大特性 3.RDD创建 4.RDD转换和动作 5.RDD持久化 6.RDD序列化 7.RDD共享变量四.Spark运行机制五.SparkSQL六.SparkStreaming...

一.下载Spark源码以及需要的一些软件Spark 2.20源码包下载http://archive.apache.org/dist/spark/spark-2.2.0/spark-2.2.0.tgz[xkhadoop@xkhadoop ~]$ wget http://archive.apache.org/dist/spark/spark-2.2.0/spark-2.2.0.tgz[xk...

GitHub中Spark地址：https://github.com/apache/sparkGitHub中Spark-RDD地址：https://github.com/apache/spark/tree/master/core/src/main/scala/org/apache/spark/rdd<一>.什么是RDD：RDD(Resilient Distributed Da...

Hadoop生态圈常用端口HDFS：50070 HDFSWEBUI端口：8020 HDFS内部端口：8088 Yarn的WEBUI接口：8032 NameNode：9000 .SecondaryNameNode：50090 DataNode：50010 历史服务器Web端口：19...