qq_23107223的博客

原创 大数据简历 专业技能内容

1深刻理解HDFS分布式文件系统存储结构和高可用原理2熟练掌握hadoopmapreduce计算框架编程，对yarn的资源调度，作业监控有一定认识3掌握stormstreaming编程，对定时批量任务处理，分布式rpc有一定认识4深刻了解Spark底层运行机制，4熟练掌握scala编程，能运用scala进行sparkRDD，sparkstreaming编程5熟悉flume，kafka等日志收集，分发框架的使用，能够将他们和storm，spark进行整合进行数...