实时大数据分析一基 于Storm、Spark技术的实时应用

本文深入探讨实时大数据分析,涵盖Storm、Spark技术的使用,包括数据处理、Trident、性能优化、Kinesis、Spark SQL和Spark Streaming等,通过实例解析实时流数据的处理与分析,适合大数据架构师和开发者学习。
摘要由CSDN通过智能技术生成

本篇详细阐述了实时大数据分析的实现过程,主要包括大数据技术前景及分析平台,Storm 的熟悉,

用Storm处理数据,Trident 概述和Storm性能优化,Kinesis 的熟悉,Spark 的熟悉,使用RDD编程,

Spark的SQL查询引擎,用Spark Streaming分析流数据以及Lambda架构等内容。此外,本篇还提供了

相应的示例、代码,以帮助读者进一步理解相关方案的实现过程。

 

实时大数据分析一基 于Storm、Spark技术的实时应用

 

 

本篇内容

第1章“大数据技术前景及分析平台”奠定了全书的知识背景,主要包括大数据前景的综述、大数据平台,上采用的各种数据处理方法、进行数据分析所用的各种平台。本章也介绍了实时或准实时批量分布式处理海量数据的范式。此外,还涉及处理高速/高频数据读写任务的分布式数据库。

实时大数据分析一基 于Storm、Spark技术的实时应用

 

 

第2章“熟悉Storm"介绍了实时/准实时数据处理框架Apache Storm的概念、架构及编程方法。这里涉及多种Storm的基本概念,诸如数据源( spouts)、数据流处理组件(bolts)、并行度(parallelism) 等。本章还以丰富的应用场景

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值