高薪的大数据工程师必掌握这些！

在过去的几年中，大数据工程师一直都是硅谷最炙手可热的职位之一。随着人工智能的崛起，与之高度相关的大数据工程师的录取标准也水涨船高。那么，作为你一个合格的大数据工程师，以下是十点重要技能，你都点亮了吗？

 

1. 知道如何利用Hadoop以及其他相关技术设计分布式系统

2. 知道如何利用Pig和Spark创造能够在Hadoop集群上运算数据的脚本

3. 知道如何利用HBase Cassandra和MongoDB来分析非关系型数据库

4. 知道什么才是在不同状况下合适的数据存储技术

5. 知道如何利用Kafka Sqoop和Flume等技术将数据发布到Hadoop集群上

6. 知道如何利用HDFS和MapReduce来存储分析大规模的数据

7. 知道如何利用Hive和MySQL分析关系型数据

8. 知道如何利用Drill Phoenix和Presto查询数据

9. 理解YARN Tex Mesos Zookeeper Zepplin Hue和Oozie是如何管理Hadoop集群的

10. 利用Spark Streaming Flink和Storm消耗流数据

 

 

想成为大数据工程师的你还有技能没有点亮，那么，是时候开始了！

 

在这里我还是要推荐下我自己建的大数据学习交流裙： 957205962， 裙 里都是学大数据开发的，如果你正在学习大数据 ，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包括我自己整理的一份2018最新的大数据进阶资料和高级开发教程，欢迎进阶中和进想深入大数据的小伙伴