视频教程-Hadoop项目实战：新闻离线项目分析-Hadoop

Hadoop项目实战：新闻离线项目分析

大数据高级架构师，多年大数据项目架构及研发经验，同时有丰富的授课经验。致力于打造大数据精品课程，让每位学习大数据的同学，学的起、学得会、学的好。

易水

¥99.00

立即订阅

扫码下载「CSDN程序员学院APP」，1000+技术好课免费看

APP订阅课程，领取优惠，最少立减5元 ↓↓↓

订阅后：请点击此处观看视频课程

 

视频教程-Hadoop项目实战：新闻离线项目分析-Hadoop

学习有效期：永久观看

学习时长：1544分钟

学习计划：26天

难度：中

 

「口碑讲师带队学习，让你的问题不过夜」

讲师姓名：易水

架构师

讲师介绍：大数据高级架构师，多年大数据项目架构及研发经验，同时有丰富的授课经验。致力于打造大数据精品课程，让每位学习大数据的同学，学的起、学得会、学的好。

☛点击立即跟老师学习☚

 

「你将学到什么？」

本课程为项目实战课，项目各个环节既深入讲解理论知识，又结合项目业务进行实操，从而达到一站式掌握大数据离线项目。

 

「课程学习目录」

第1章：大数据平台集群节点准备

1.虚拟机介绍

2.VMware虚拟机安装

3.Linux操作系统介绍

4.虚拟机安装1

5.虚拟机安装2

6.Linux网络配置

7.Linux静态IP配置

8.Linux虚拟机克隆

9.X-Shell集群连接工具使用

10.Linux创建用户和用户组

11.Linux主机名配置

12.Linux防火墙关闭

13.openssh-clients服务安装

14.配置主机名与IP地址映射

15.SSH免密码登录

16.FileZilla集群上传与下载工具的安装与使用

17.集群节点2完整配置

18.集群节点3完整配置

第2章：项目需求分析

1.项目需求与分析

2.项目架构设计

3.项目离线计算与实时计算数据流程设计

4.大数据集群平台角色规划

第3章：Zookeeper分布式集群安装部署

1.Zookeeper生态圈

2.Zookeeper系统架构原理

3.Zookeeper如何提供服务

4.Zookeeper集群规划

5.Zookeeper集群时钟同步

6.Zookeeper集群Hosts文件配置

7.Zookeeper集群SSH免密码登录

8.Zookeeper 集群配置文件编写

9.集群分发脚本deploy.sh编写

10.集群分发脚本deploy.sh调试

11.集群远程命令执行脚本runRemoteCmd.sh编写

12.Zookeeper集群JDK安装

13.Zookeeper集群安装部署

14.Zookeeper Shell测试运行

第4章：Hadoop（CDH5）分布式集群安装部署

1.HDFS概述

2.HDFS体系结构

3.HDFS高可用原理

4.YARN概述

5.YARN系统架构

6.MapReduce ON YARN

7.YARN高可用

8.HDFS安装配置

9.HDFS服务启动

10.HDFS测试运行

11.YARN安装配置

12.YARN服务启动bug调试

13.YARN测试运行

14.Hadoop官网文档使用详解

第5章：Eclipse与MapReduce集成开发

1.MapReduce概述

2.MapReduce编程模型

3.Wordcount完整流程分析

4.本地JDK安装配置

5.Eclipse下载安装1

6.Eclipse下载安装2

7.本地maven安装配置

8.Eclipse配置maven

9.Eclipse构建maven项目

10.Eclipse开发MapReduce程序1

11.Eclipse开发MapReduce程序2

12.Eclipse本地调试运行MapReduce1

13.Eclipse本地调试运行MapReduce2

14.Eclipse项目打包的两种方式

15.MapReduce提交YARN集群运行

16.maven管理多个MapReduce程序1

17.maven管理多个MapReduce程序2

18.MapReduce调试、打包及部署运行

第6章：HBase分布式集群安装部署

1.HBase数据模型

2.HBase物理模型

3.HBase系统架构组成

4.HBase实际应用案例

5.HBase安装前须知

6.HBase集群规划

7.HBase版本选择与下载解压

8.HBase配置文件修改

9.HBase启动运行

10.HBase master切换访问

11.HBase 数据库shell测试运行

12.HBase业务建模

第7章：Kafka1.x分布式集群安装部署

1.Kafka定义及应用场景

2.Kafka设计目标与特点

3.Kafka系统架构组成

4.Kafka拓扑结构

5.Kafka版本兼容性与选择

6.Kafka集群安装配置

7.Kafka在Zookeeper元数据解读

8.Kafka 新api测试运行

9.Kafka旧api测试运行

10.Kafka集群监控与kafkamonitor.sh脚本编写

11.Kafka 监控可视化指标分析

12.Kafka监控注意事项

第8章：大数据项目数据采集1

1.Flume概述

2.Flume系统架构

3.Flume安装部署1

4.Flume安装部署2

5.Flume集群构建-编写集群配置文件

6.Flume集群构建-数据聚合测试运行

7.大数据项目数据格式分析

8.项目数据预处理

9.KafkaSink配置详解

10.编写Flume与Kafka集成配置文件

11.Flume单节点与Kafka集成测试运行

12.Flume集群与Kafka集成测试运行

13.HBaseSink配置详解

14.Flume与HBase最简集成1

15.Flume与HBase最简集成2

16.HBase模型建立及与Flume集成配置文件编写

17.Eclipse导入Flume源码

18.Eclipse导入Flume源码错误调试

19.Flume HBaseSink源码分析

20.Flume HBaseSink源码修改

21.Flume HBaseSink增加调试代码

22.Flume HBaseSink源码打包及配置文件修改

23.Flume HBaseSink二次开发源码部署

24.Flume与HBase集成项目测试运行

25.大数据项目离线和实时数据流程详解

第9章：大数据项目数据采集2

1.Flume Channel选择器原理

2.Flume Channel选择器配置详解

3.Flume单节点集成Kafka与HBase配置编写

4.Flume单节点集成Kafka与HBase测试运行

5.Flume集群集成Kafka与HBase配置文件编写

6.Flume集群集成Kafka与HBase测试运行

7.应用服务器模拟程序开发

8.模拟程序两种打包方式及脚本相关目录创建

9.模拟程序服务器测试运行

10.模拟程序shell脚本开发

11.Flume聚合启动脚本开发

12.Flume采集脚本开发

13.Flume关闭脚本开发

14.Kafka消费者shell脚本开发

15.大数据集群服务启动1

16.大数据集群启动2及测试准备工作

17.数据产生、采集、存储联调1

18.数据产生、采集、存储联调2

19.数据产生、采集、存储联调3

第10章：大数据项目离线分析

1.Hive概述

2.Hive体系结构及原理

3.Hive Metastore安装方式及部署架构

4.Mysql元数据库在线安装

5.Hive安装配置

6.Hive服务启动与测试

7.Hive图像界面安装配置

8.Hive Web服务启动运行

9.HiveServer与Hive Server2区别与联系

10.JDBC连接HiveServer2测试1

11.JDBC连接HiveServer2测试2

12.beeline连接HiveServer2测试运行

13.编写Hive与HBase集成配置文件

14.Hive创建外部业务表1

15.Hive创建外部业务表2

16.大数据项目数据分析测试

17.大数据项目离线分析1

18.大数据项目离线分析2

第11章：大数据项目数据可视化

1.Hue安装配置1

2.Hue安装配置2

3.Hue安装配置3

4.Hue与HDFS集成开发

5.Hue与YARN集成开发

6.Hue与Hive集成开发

7.Hue与HBase集成开发

8.Hue与MySQL集成开发

9.大数据项目可视化分析1

10.大数据项目可视化分析2

 

「7项超值权益，保障学习质量」

• 大咖讲解

技术专家系统讲解传授编程思路与实战。

• 答疑服务

专属社群随时沟通与讲师答疑，扫清学习障碍，自学编程不再难。

• 课程资料+课件

超实用资料，覆盖核心知识，关键编程技能，方便练习巩固。（部分讲师考虑到版权问题，暂未上传附件，敬请谅解）

• 常用开发实战

企业常见开发实战案例，带你掌握Python在工作中的不同运用场景。

• 大牛技术大会视频

2019Python开发者大会视频免费观看，送你一个近距离感受互联网大佬的机会。

• APP+PC随时随地学习

满足不同场景，开发编程语言系统学习需求，不受空间、地域限制。

 

「什么样的技术人适合学习？」

• 想进入互联网技术行业，但是面对多门编程语言不知如何选择，0基础的你
• 掌握开发、编程技术单一、冷门，迫切希望能够转型的你
• 想进入大厂，但是编程经验不够丰富，没有竞争力，程序员找工作难。

 

「悉心打造精品好课，26天学到大牛3年项目经验」

【完善的技术体系】

技术成长循序渐进，帮助用户轻松掌握

掌握Hadoop知识，扎实编码能力

【清晰的课程脉络】

浓缩大牛多年经验，全方位构建出系统化的技术知识脉络，同时注重实战操作。

【仿佛在大厂实习般的课程设计】

课程内容全面提升技术能力，系统学习大厂技术方法论，可复用在日后工作中。

 

「你可以收获什么？」

掌握大数据离线项目常用技术组件

掌握大数据离线项目开发流程

 

订阅课程 开始学习