Storm入门教程 玩转大数据计算之Storm

Storm入门教程 玩转大数据计算之Storm

大数据分析工程师任职要求：
1.计算机、数学等相关专业，2年以上大数据分析工作经验，博士优先
2.有较强的机器学习算法理论知识，熟悉常用的一些机器学习算法，分类、回归等
3.具备良好的编程基础，至少会Python,R，等一种主流语言
4.熟悉Hadoop大数据框架及Hive、Hbase、storm等相关技术
岗位职责：
1.协助构建以工业物联网为中心的大数据平台。
2.负责对各种工业数据进行数据挖掘，数据分析，建立数据模型，优化生产工艺。
学大数据的掌握以上技能 月薪将达到2万以上

Storm实时开发：
大数据工程师中storm简介与基本知识、拓扑详解与组件详解、Hadoop分布式系统、spout详解与bolt详解、zookeeper详解、storm安装与集群搭建、storm-starter详解、开源数据库HBase、trident详解；

课程目标：【学习本课程就能知道数据分析师要学什么】

1、storm基本概念和组件介绍
2、storm分组策略
3、storm安装
4、Storm 记录级容错原理
5、Storm 配置详解
6、storm基本api介绍
7、Storm Topology的并发度
8、Storm消息机制原理讲解
9、Storm DRPC实战讲解
10、Storm Transaction 原理+实战讲解
11、Storm 实现滑动窗口计数和TopN排序
12、Storm流聚合
13、Storm的新利器Pluggable Scheduler

适合对象：【什么样的人适合学习本课程】

大数据研究方向人员

学习条件：【学习本课程需要具备什么样的基础知识和条件】
有一定java基础和linux基础，掌握分布式的基本概念

课程目录：

1.Storm基础知识
storm基础知识讲解，包括实时计算需要解决一些什么问题，怎么实现一个实时计算系统，storm的基本概念，storm应用场景，storm的分组机制。

2.storm集群安装-1
详细讲述storm集群的安装，手把手教授安装流程并排除问题.

3.Storm集群安装-2

4.Storm-starter打包运行测试Storm集群
详细讲解storm-starter打包部署运行的全过程，同时进行storm集群验证。

5.Storm 配置文件配置项讲解
详细讲解storm配置文件对应的参数，以及用法。

6.Maven 环境快速搭建教程
讲述maven环境的搭建过程，以及常用命令。

7.storm基本api介绍

8.Storm Topology的并发度

9.Storm消息机制原理讲解

10.Storm DRPC实战讲解

Storm大数据教程下载地址：
http://www.xuexiluxian.net/storm.html