大数据相关技术的代表产品总结

最新推荐文章于 2023-01-29 23:13:36 发布
最新推荐文章于 2023-01-29 23:13:36 发布
阅读量2.1k 收藏
点赞数
分类专栏： Linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Markfieraloha/article/details/108825231
版权
大数据计算模式解决问题代表产品
批处理计算针对大规模数据的批量处理MapReduce, Spark等
流计算针对流数据的实时计算Storm, S4, Flume, Streams, Puma, DStream, Super Mario, 银河流数据处理平台等
图计算针对大规模图结构数据分析Pregel, GraphX, Giraph, PowerGraph, Hama, GoldenOrb等
查询分析计算大规模数据的存储管理和查询分析Dremel, Hive, Cassandra, Impala等

参考资料：
林子雨等.《大数据技术原理与应用》. 中国大学MOOC.

胖虎的编程日记
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
大数据产品设计案例
10-28
对大数据产品架构及其在教育、医疗、交通、政府等各行业的解决方案进行了讲解。
干货|盘点国内真正的大数据分析产品
weixin_34384915的博客
07-23 1244
本文来自网易云社区。 下面简单介绍几款比较有代表性的大数据分析平台：   1、 Cloudera 作为全球认知度最高的大数据平台公司，国内90%的版本基本都是在CDH的基础上封装的，对社区的掌控力最大。与国际软件供应商联手，产品涵盖大数据平台、ETL、高级分析、数据可视化等各个方面。Cloudera提供一个可扩展、灵活、集成的平台，可用来方便的管理您的企业中快速增长的多种多样的数据，从而部...
金融科技&大数据产品推荐：BIGDAF——专业的Hadoop大数据安全防火墙
数据猿
10-18 737
BIGDAF是国内第一个网关级Hadoop大数据安全防火墙，也是目前唯一通过公安部认证的Hadoop安全防护产品，具备“软件-硬件-云”多样化产品形态 官网 | www.datayuan.cn 微信公众号ID | datayuancn 本产品为数据猿推出的“金融科技价值—数据驱动金融商业裂变”大型主题策划活动第一部分的文章/案例/产品征集部分；感谢
视频大数据产品-物联网、视频、大数据、三维、移动
JackWang_cm的专栏
10-09 994
视频大数据产品介绍，有意向联系邮箱jack.wang.cm@live.com，微信jackwangcm
2018 大数据产品一览
枫柚master的博客
04-19 310
下载地址：https://github.com/hecore/coreDoc/blob/master/%E7%9F%A5%E8%AF%86%E5%9B%BE%E8%B0%B1/%E5%A4%A7%E6%95%B0%E6%8D%AE/Matt_Turck_FirstMark_Big_Data_Landscape_2018_Final.png
大数据期末复习总结.pdf
07-08
大数据技术是近年来信息技术领域发展最为迅速的领域之一，而Hadoop作为大数据处理技术的代表，已经在众多企业中得到了广泛的应用。本总结主要涵盖以下几个方面：Hadoop的基础知识、Hadoop生态系统、HDFS和YARN的基本...
大数据技术原理与应用综述
03-17
### 大数据技术原理与应用综述 #### 一、大数据概述 大数据作为一个现代信息技术领域的重要组成部分，不仅代表了信息处理技术的高度抽象和概括，更体现了数据作为一种战略资源的巨大潜在价值。随着信息技术的不断...
大数据计算模式和关键技术ppt课件.ppt
11-16
下面是大数据计算模式和关键技术的总结： 大数据计算模式 大数据计算模式可以分为批处理计算模式、流计算模式、图计算模式和查询分析计算模式四种。 1. 批处理计算模式：批处理计算模式是指将大量数据批量处理的...
天池大数据比赛总结.zip
11-11
在大数据领域，天池大数据比赛是一项非常知名的赛事，旨在促进数据科学与机器学习技术的发展，同时也为参赛者提供了一个实践和提升技能的平台。通过参与此类比赛，参赛者可以接触到真实世界的问题，学习如何处理海量...
XX市大数据技术发展实战可行性研究
最新发布
04-23
- **优势与不足**：总结大数据技术实战应用中的优势和不足之处，为后续的技术改进提供参考。 #### 四、研究方法概述 - **文献研究**：广泛阅读国内外相关的学术论文、研究报告，以了解大数据技术的最新进展和应用...
大数据典型的计算模式
qq_36294338的博客
09-23 7680
1、批处理计算 针对大规模数据的批量处理 代表产品：MapReduce；Spark等 2、流计算 针对流数据的实时运算，实时处理，给出实时响应，否则分析结果就会失去商业价值 代表产品：Storm、S4、Stream、Puma、DStream、Super Mario、银河流数据处理平台等 3、图计算 针对大规模图结构数据的处理 代表产品：Pregel、Graphx、PowerGraph、Hama、GoldenOrb等 4、查询分析计算 针对大规模数据的存储管理和查询分析 代表产品： Dremel、
大数据产品概念和分类
05-04 3330
导读：大数据是数据的集合，以容量大、类型多、速度快、精度准、价值高为主要特征，是推动经济转型发展的新动力。大数据市场经过20多年的长足发展，形成了丰富的市场生态，从产品、服务供应端的视角大致可分为如下领域：大数据基础设施、大数据分析、大数据应用、大数据开源项目、数据源和API、数据资源。下面我们对各个领域择要讨论，并对数据分析相关部分着重展开。大数据基础设施大数据技术的高...
大数据分析技术种类与应用
中琛魔方大数据
07-21 1357
　　大数据(big data)，指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 　　一、大数据的特点 　　1)Volume(大量)： 　　截至目前，人类生产的所有印刷材料的数据量是200PB，而历史上全人类总共说过的话的数据量大约是5EB。当前，典型个人计算机硬盘的容量为TB量级，而一些大企业的数据量已经接近EB量级。 　　2)Velocity(高速)：...
大数据应用型产品的设计方法
于连林
11-17 984
▲点击上方“老于的笔记”关注公众号回复1，免费获取B端运营地图正文来了大数据最早在上世纪90年代被提出，麦肯锡在2012年的评估报告中指出“大数据时代”已经到来，使得人们对于大数据重要性的认知和关注度进一步增加。大数据的特点和价值大数据的四个特点：数据量巨大、数据类型众多、处理速度快、数据价值高。大数据的价值突出体现在以下几个方面：优化客户感知用大数据为最终客户工作生 活学习娱乐等带来便利和享 ...
《从0开始学大数据》之对大数据最经典、最主流的一些技术和产品梳理总结
CJJ的博客
01-29 344
极客时间《从0开始学大数据》学习笔记
大数据技术的十个关键点
yunxinan的专栏
12-18 1142
第一课： 目前数据分析主流的是R、python，相信大部分不会用C++和julia这两个和java的那套体系的工程量太大，并且大部分都是业务逻辑写改删查抄。 C语言确实有点难，他和汇编类似，粒度到操作符级别，但是我认为编码必须学C++这个是一个编程基础。也是理解底层的基本功。 第二课： 线性回归、多元回归、多项式回归、非线性回归（倒数回归、对数回归）、多重共线性 第三课： 岭回归、第一课：概述与工...
大数据分析技术有哪些类型
中琛魔方大数据
09-14 1724
　　数据分析技术使数据分析人员能够审查并回顾收集的数据，并根据信息进行推断或确定。大多数技术都侧重于应用定量技术来审查数据，一些比较常见的定量数据分析技术包括描述性统计、探索性数据分析和验证性数据分析。后两者涉及使用支持或不支持预定假设。使用这些技术的团体包括个人数据分析人员、学生、企业、政府机构和精算师，以及需要信息和数据的其他各个方面。 　　定量数据分析： 　　有时在尝试从收集的数据中消除数据分析人员的偏见。大量使用统计、概率或其他数学技术允许个人使用标准方法来解释数据。当数据分析人员试图使用定性数
常见的大数据技术类型有哪些
中琛魔方大数据
05-28 3895
　　随着互联网的不断发展，越来越多的企业和用户都开始接触和学习大数据技术，它与机器学习、人工智能、区块链、物联网和增强现实等其他技术密切相关。因此，许多行业已经在大数据分析技术方面作了投入，比如银行、离散制造和流程制造等行业。 　　目前比较常见的一些大数据技术都有哪些类型？今天我们就一起来了解一下，目前比较常见的一些大数据技术都有哪些类型。 　　1.数据湖 　　数据湖是个庞大的数据存储库，从不同来源收集数据，并以自然状态存储起来。切莫与数据仓库混为一谈，数据仓库基本上执行同样的功能，...
大数据处理技术 PySpark 复习提纲 文字版
Loy Fan
05-29 582
第一章 大数据计算模式及其代表产品 批处理计算（针对大规模数据的批量处理） MapReduce、spark 流计算（针对流数据的实时计算） S4、Storm、Streams、Dstream、Puma、SuperMario、银河流处理平台、Flume 图计算（针对大规模图结构数据的处理） Giragh、PowerGragh、GraghX、Hama、GoldenOrb、Pregel 查...
大数据时代的关键技术与影响
与此同时，随着Web2.0的繁荣，非结构化数据激增，传统的数据处理方法已无法满足需求，催生了大数据技术的快速发展，如Hadoop、MapReduce等，它们为处理海量数据提供了有效的解决方案。 大数据的应用广泛，已渗透到...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值