为了保证效率和质量,每篇文章发布6个知识点,由简单及难,我们开始spark+kafka:
一般情况下面试的时候只要涉及到实时计算或者大批量计算,都会涉及到kafka和spark的面试问题,两者一般是综合起来的的,因此我把他们放在一起进行总结,这一块的问题会比较多,将分不同纬度多次总结。
友情提示:本专栏涉及大数据面试题及相关知识点不同于大多数的网络复制文,是博主精心准备和总结的最新的面试及知识点,喜欢就订阅噢,后续还会开展hdfs源码解析,spark源码解析栏目,欢迎关注博客,大家一起学习!
专栏:点击打开链接
博客:点击打开链接
1)spark的执行流程?
1.构建Spark Application的运行环境(启动SparkContext),SparkContext向资源管理器(可以是Standalone、Mesos或YARN)注册并申请container资源ÿ