第一讲主题:认识数仓

一 主讲人个人入门和经验经历 
自学转行-》小公司数据-》个人奋斗+运气-》真实某大厂数据组组长-》真实年薪百万

[B站搜索 踏踏实实练SQL, 这个B站UP主(语兴呀)是某大厂数仓大佬,可加好友学习,他人很好]

二 大数据相关岗位和平时具体工作内容
1.数据仓库--熟练写SQL,加工数据指标
2.数据分析--熟练写PPT&会写SQL,找到有价值的数据指标
3.数据BI工程师--熟练做数据大屏,展示数据指标
4.数据平台--熟练写java代码,做一个方便加工数据的平台
5.数据产品--研究好需求,熟练数据产品化
6.数据平台销售--卖平台产品,熟练做市场
--------------------------------------
做数仓建设类似开饭店,问客户点啥菜 买菜 做菜 出菜 上菜 
大公司是像上面写的一样一个环节一个岗位,
中小公司可能一个人需要负责多个环节,甚至连锅都没有,还要借用hadoop开源的组件来做菜


三 大数据就业环境薪资情况入职方式 
19年之前环境很好,19年之后地狱模式, 现在估计炼狱模式
19年之前入门年薪20万起步,19年之后入门年薪12万起步
19年之前P6级(大多数人的天花板)年薪50万以上,19年之后P6级年薪30万左右
--------------------------------------
希望就在前方,会好的
做大数据,踏踏实实做,上限很高,只要努力和积累,年薪百万可以的


四 数据仓库开发岗在大数据生态中的定位分析
数据仓库概念:面向主题的、集成的、相对稳定的、反应历史变化数据的集合,用于支持管理决策
数据仓库定位:
承接各种数据源,通过
采(对数据源数据采集)、
建(数据资产/模型建设)、
管(数据管理、数据服务)、
用(如何利用数据为下游创造更多应用价值分析)
的方式实现下游需求内容为数据分析、运营、风控等业务提供数据支撑

数据仓库作用:降本增效


五 数仓发展历程
技术栈的
1.0时代  mysql/oracle
2.0时代  hadoop全家桶 cdh等
3.0时代  各大厂的数据平台

数仓建模的
1.0时代  采集ods层+dw数仓层
2.0时代  5分层 建模五层规范开始背,,,
3.0时代  6分层 多一层给数分岗位用,省得把咱们数仓最后一层的表搞得乱七八糟

六 数据仓库建设内容大图及简介
课程里有图,自己去看,这里不放了

七 数据仓库组件及架构
开始背Lambda架构和Kappa架构分别是啥样的,啥区别

八 数据仓库各个层级需要达到的水平
点(p5日常需求,p6单一模块开发) (本科和211学历的天花板)
面(p7技术层,p8业务层面) (985学历+半点运气的天花板)
体(p9) (C9学历/高级海龟+很多运气的天花板)

大专,自考本科等学历的朋友怎么办,
要先看城市,
想在一线城市的,学习写sql,当个sqlboy无欲无求挺好,因为一线城市公司大数据基本进入3.0时代了,写写sql完成业务需求就行

想在二线城市发展的(杭州,南京,合肥。。。),建议先做两年java后再转大数据,
同时在学大数据的时候,把hadoop的各个组件使用熟悉,cdh要会独立搭建,对硬件机器也要了解,
要可以评估新业务要用多少cpu/内存/磁盘啥的,自己一个人要能从0到1,搭建一个公司的大数据组件,并维护好不出问题。

不管什么岗位,什么学历,SQL练好是基础,先把牛客网最简单的前100道SQL题刷完,才能有资格入门。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值