今天我们来了解一下大数据的职业发展、岗位细分、以及工作内容。
大数据总体可分为2大方向5大职业。
2大类分别为技术类和业务类,其中,技术方向侧重于怎样处理好数据,业务方向侧重于怎样用好数据;
技术方向
技术类方向是大数据界的码农、程序员。
1)大数据平台研发路线
- 职责:主要负责大数据技术的产品化,包括开源技术框架的研究、封装和开发
- 入门:系统性了解大数据技术体系(spark、hadoop、hbase等技术),通读一遍各技术框架的技术文档,知道每项技术能够解决什么问题,其实现原理,优缺点等;能够调用各技术框架API进行功能封装
- 进阶:能够优化开源框架性能及完善开源技术、作为开源社区的commiter
- 发展:数据平台研发架构师、数据平台产品经理
2)大数据开发路线
- 职责:也叫ETL工程师,主要负责使用大数据技术采集、处理、分析数据;
- 入门:同数据平台研发工程师,并熟练使用SQL、存储过程;
- 进阶:技术选型、技术架构设计、数据架构设计、平台性能调优
- 发展:数