扫码下载「CSDN程序员学院APP」,1000+技术好课免费看
APP订阅课程,领取优惠,最少立减5元 ↓↓↓
订阅后:请点击此处观看视频课程
视频教程-大数据与数据仓库入门到精通-Hadoop
学习有效期:永久观看
学习时长:1721分钟
学习计划:29天
难度:中
「口碑讲师带队学习,让你的问题不过夜」
讲师姓名:王佳隆
技术经理
讲师介绍:目前在国内独角兽企业从事大数据架构工作,从事数据行业10年+,精通数据架构,数据库架构,数据仓库及大数据平台化。
☛点击立即跟老师学习☚
「你将学到什么?」
本课程以CDH作为大数据平台,详细介绍CDH平台各个组件在生产环境的应用及开发,并结合实际的业务场景,离线数仓,实时数仓,构建企业核心的数据架构。
在实际的工作当中,大数据架构,运维或者开发人员会与多个公司团队合作,ETL团队,爬虫团队,算法团队,运营团队等等,指导大家如何与个个团队打交道,提升工作效率。减少团队之间不愉快的沟通。
希望学习者最好从事过数据库相关工作,有一些 JAVA开发基础,或者有其他工作经验,想学习大数据及数据仓库的同学,对于没有工作经验,或者对开发,数据完全小白的同学,建议先了解相关知识再学习。
本课程的宗旨只有一条,任何学习完本课程的同学,都能熟悉企业主流的数据架构,都有能力维护一个中等HADOOP集群,也就是1P左右的数据的集群或者多个集群。
「课程学习目录」
1.前言 |
2.How To Find Me |
3.数据意识浅谈 |
4.大数据平台介绍,及与传统数据仓库架构方式的区别 |
5.CDH平台安装规划--硬件规划 |
6.CDH安装--软件规划 |
7.CDH安装部署--yum源及依赖软件安装 |
8.Cloudera Manager安装 |
9.添加CDH机器 |
10.HDFS及高可用安装 |
11.HDFS角色深入理解 |
12.深入理解HDFS高可用 |
13.HDFS基础命令及高可用切换 |
14.HDFS基本配置 |
15.YARN及高可用安装 |
16.YARN服务详解 |
17.Hive及impala安装部署 |
18.impala自动同步Hive元数据变更 |
19.impala指定Coordinate和Executor |
20.HIVE on Tez实战 |
21.hive on Tez遗留问题 |
22.Hive及Impala的基本配置 |
23.Hue高可用安装 |
24.Cloudera Manager使用详解 |
25.结合数据仓库理论进行HIve与Sqoop基本操作--1 |
26.结合数据仓库理论进行HIve与Sqoop基本操作--2 |
27.hive/Impala JDBC相关问题 |
28.Hive锁机制及案例 |
29.网络丢包导致Hadoop集群瘫痪案例 |
30.Kerberos安全认证安装详解 |
31.CDH开启kerberos |
32.Kerberos遗留问题 |
33.LDAP用户认证详解 |
34.Hive/Impala开启LDAP认证 |
35.Hue开启LDAP认证 |
36.Hive/Impala 用户权限控制-1 |
37.Hive/Impala 用户权限控制-2 |
38.hive原生自带认证方式详解-1 |
39.hive原生自带认证方式详解-2 |
40.YARN动态资源池管理 |
41.YARN资源监控及报警 |
42.HBASE/Solr集群安装 |
43.HBASE逻辑模型介绍 |
44.HBASE内部体系介绍-1 |
45.HBASE内部体系介绍-2 |
46.HBASE内部体系介绍-3 |
47.phoenix结合Hbase查询操作 |
48.HBASE与SOLR,ES结合快速查询 |
49.HBASE使用kerberos认证开发(Spring) |
50.HBASE Client连接kerbeors DNS反解析 |
51.Kafka原理详解 |
52.Kafka原理详解-2 |
53.Spring和Kafka编程 |
54.kafka压力测试 |
55.数据仓库元数据介绍 |
56.开源元数据管理软件Atlas安装部署 |
57.Atlas数据初始化 |
58.数据仓库元数据如何自主研发 |
59.数据仓库调度器oozie讲解 |
60.数据仓库调度器oozie讲解-2 |
61.生产环境HADOOP平台阶段性总结 |
62.MySQL数据库意识精讲-查询buffer |
63.MySQL数据库意识精讲-优化器及索引 |
64.MySQL数据库意识精讲-数据一致性 |
65.MySQL数据库意识精讲-高可用 |
66.MySQL数据库意识精讲-多源复制 |
67.MySQL优化基本思路 |
68.Canal实时同步MySQL binlog |
69.Maxwell实时同步MySQL binlog |
70.离线数据仓库,跨库查询业务,实时数据仓库 |
71.日志采集方案及架构 |
72.实时流Flink介绍 |
「7项超值权益,保障学习质量」
- 大咖讲解
技术专家系统讲解传授编程思路与实战。
- 答疑服务
专属社群随时沟通与讲师答疑,扫清学习障碍,自学编程不再难。
- 课程资料+课件
超实用资料,覆盖核心知识,关键编程技能,方便练习巩固。(部分讲师考虑到版权问题,暂未上传附件,敬请谅解)
- 常用开发实战
企业常见开发实战案例,带你掌握Python在工作中的不同运用场景。
- 大牛技术大会视频
2019Python开发者大会视频免费观看,送你一个近距离感受互联网大佬的机会。
- APP+PC随时随地学习
满足不同场景,开发编程语言系统学习需求,不受空间、地域限制。
「什么样的技术人适合学习?」
- 想进入互联网技术行业,但是面对多门编程语言不知如何选择,0基础的你
- 掌握开发、编程技术单一、冷门,迫切希望能够转型的你
- 想进入大厂,但是编程经验不够丰富,没有竞争力,程序员找工作难。
「悉心打造精品好课,29天学到大牛3年项目经验」
【完善的技术体系】
技术成长循序渐进,帮助用户轻松掌握
掌握Hadoop知识,扎实编码能力
【清晰的课程脉络】
浓缩大牛多年经验,全方位构建出系统化的技术知识脉络,同时注重实战操作。
【仿佛在大厂实习般的课程设计】
课程内容全面提升技术能力,系统学习大厂技术方法论,可复用在日后工作中。
「你可以收获什么?」
熟悉实际生产环境的数据架构
熟悉如何与其他团队沟通合作
站在架构的层次来理解HADOOP平台