目录
随着互联网技术的飞速发展,现在已经进入了大数据时代。每个人每时每刻都在生产着大量的数据,各行各业对于数据的重视程度也越来越高。数据岗位的市场需求也就日益增多。作为一个数据行业的从业者,谈一点自己对于现阶段各个数据岗位的理解。
目前,市场主流公司的数据岗位主要分为以下几个不同的方向
1、数据仓库工程师/BI工程师/数据BP
能力:侧重于数据仓库整体建设,数仓架构,数据模型设计,需要有一定的业务理解。
工作职责:ETL任务开发运维调优,需要熟悉主流数据计算框架(hive、spark、flink)的使用和调优,对底层运行原理要有一定的理解;对于数据治理(元数据管理、数据质量、血缘管理、指标体系)有一定程度的深度了解(视岗位级别而定)。
技术栈:sql、python/java/scala、大数据套件的使用,需要有一定的编程和算法能力
2、数据平台开发/大数据开发
能力:侧重于功能开