about云日志分析课程—94人已学习
课程介绍
课程分为四部分: 第一部分集群安装:里面详细介绍了集群安装知识及大数据组件如何实现整合的。 第二部分Scala知识:这里补充了初级入门知识,为以后学习、使用spark打下基础。 第三部分spark编程知识:让我们有了spark编程的基础 第四部分about云日志项目实战:从网站的搭建产生日志,到处理flume,kakfa传递,然后spark streaming实时处理统计。
课程收益
通过所学知识,达到实战日志分析。
讲师介绍
侯勇蛟 更多讲师课程
about云首席讲师,多年软件开发经验,曾担任项目经理、架构师、技术总监等职位。目前专注于云技术大数据。
课程大纲
1. 集群环境搭建-Linux安装 16:48
第2章:集群环境搭建
1. 课集群环境搭建 36:25
2. 虚拟机克隆 12:13
3. SSH配置 8:05
4. NTP服务配置 10:44
5. hadoop集群安装和配置 24:24
6. 课集群的使用-常用命令 8:48
7. spark集群的安装和配置 31:03
8. kafka集群的搭建 28:49
9. Flume与kafka整合 24:02
第3章:Scala知识
1. scala下载和安装 24:23
2. 基本操作和程序控制结构 39:05
3. Array&List基本操作 22:49
4. Set&Map&Tuple操作 25:19
5. 函数和常用高阶函数 32:25
6. 函数和常用高阶函数(补充) 3:03
7. 类和对象 23:59
8. 模式匹配与正则表达式 16:10
9. 模式匹配与正则表达式 13:02
第4章:spark编程知识
1. Spark RDD 编程 42:26
2. Spark DataFrame&SQL 编程 39:55
3. Spark Streaming编程(上) 30:28
4. Spark Streaming编程(下) 24:36
第5章:about云日志项目实战
1. 搭建网站&获取日志 21:36
2. 需求分析与整体架构设计 9:55
3. flume&kafka数据传输(上) 8:05
4. flume&kafka数据传输(下) 16:06
5. idea安装和插件安装 9:41
6. idea项目创建和导入sbt依赖文件 11:01
7. 修改Apache访问日志格式 4:55
8. Apache日志解析(AccessLogParser.scala讲解) 32:10
9. 配置文件作用和解析 15:52
10. 驱动&调度类的实现 17:08
11. 日志统计指标实现 32:52
12. 部署spark程序到集群 11:13
13. 通过后台查看统计结果 15:33
大家可以点击【 查看详情】查看我的课程
课程介绍

课程分为四部分: 第一部分集群安装:里面详细介绍了集群安装知识及大数据组件如何实现整合的。 第二部分Scala知识:这里补充了初级入门知识,为以后学习、使用spark打下基础。 第三部分spark编程知识:让我们有了spark编程的基础 第四部分about云日志项目实战:从网站的搭建产生日志,到处理flume,kakfa传递,然后spark streaming实时处理统计。
课程收益
通过所学知识,达到实战日志分析。
讲师介绍
侯勇蛟 更多讲师课程
about云首席讲师,多年软件开发经验,曾担任项目经理、架构师、技术总监等职位。目前专注于云技术大数据。
课程大纲
1. 集群环境搭建-Linux安装 16:48
第2章:集群环境搭建
1. 课集群环境搭建 36:25
2. 虚拟机克隆 12:13
3. SSH配置 8:05
4. NTP服务配置 10:44
5. hadoop集群安装和配置 24:24
6. 课集群的使用-常用命令 8:48
7. spark集群的安装和配置 31:03
8. kafka集群的搭建 28:49
9. Flume与kafka整合 24:02
第3章:Scala知识
1. scala下载和安装 24:23
2. 基本操作和程序控制结构 39:05
3. Array&List基本操作 22:49
4. Set&Map&Tuple操作 25:19
5. 函数和常用高阶函数 32:25
6. 函数和常用高阶函数(补充) 3:03
7. 类和对象 23:59
8. 模式匹配与正则表达式 16:10
9. 模式匹配与正则表达式 13:02
第4章:spark编程知识
1. Spark RDD 编程 42:26
2. Spark DataFrame&SQL 编程 39:55
3. Spark Streaming编程(上) 30:28
4. Spark Streaming编程(下) 24:36
第5章:about云日志项目实战
1. 搭建网站&获取日志 21:36
2. 需求分析与整体架构设计 9:55
3. flume&kafka数据传输(上) 8:05
4. flume&kafka数据传输(下) 16:06
5. idea安装和插件安装 9:41
6. idea项目创建和导入sbt依赖文件 11:01
7. 修改Apache访问日志格式 4:55
8. Apache日志解析(AccessLogParser.scala讲解) 32:10
9. 配置文件作用和解析 15:52
10. 驱动&调度类的实现 17:08
11. 日志统计指标实现 32:52
12. 部署spark程序到集群 11:13
13. 通过后台查看统计结果 15:33
大家可以点击【 查看详情】查看我的课程