典型的大数据应用软件

最新推荐文章于 2024-09-22 14:48:38 发布

karo_lee

最新推荐文章于 2024-09-22 14:48:38 发布

阅读量107

点赞数

文章标签：大数据 hadoop

本文链接：https://blog.csdn.net/karo_lee/article/details/84596802

版权

数据摄取层 Apache Flume,Storm

Hadoop存储 HDFS

NoSQL数据库 HBase,Cassandra

规则引擎 MapReduce任务

管理平台

查询工具 MapReduce,Pig,Hive

查询引擎 Solr

协作工具 Zookeeper.Oozie

分析引擎Ｒ，Pentaho

可视化工具 Tableau,Clickview,Spotfire

大数据分析应用 EMC Greenplum,IBM Netezza,IBM Pure Systems,Oracle Exalytics

监控 Ganglia,Nagios

数据集成ＩＤＥ Talend,Pentaho

Hadoop管理 Cloudera,DataStax,Hortonworks,IBM Big Insights

公共云虚拟平台 Amazon AWS & S3,Rackspace

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

karo_lee

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

大数据讲课笔记2.2 大数据应用场景

howard2005的专栏

10-03

1815

1. 熟悉大数据在医疗行业的应用； 2. 熟悉大数据在金融行业的应用； 3. 熟悉大数据在零售行业的应用； 4. 熟悉大数据在教育行业的应用； 5. 熟悉大数据在智慧城市的应用； 6. 熟悉大数据在农业中的应用； 7. 熟悉大数据在环保中的应用

5. 工业大数据典型应用

补补7的博客

08-24

614

优化现有业务，实现提质增效；促进企业升级转型；促进中小企业创新创业

参与评论您还未登录，请先登录后发表或查看评论

大数据分析--数据清洗和准备

10-09

在数据分析和建模的过程中，相当多的时间要用在数据准备上：加载、清理理、转换以及重塑。这些工作会占到分析师时间的80%或更更多。

大数据采集、清洗、处理：使用MapReduce进行离线数据分析完整案例

热门推荐

leeyu的博客

04-23

2万+

1 大数据处理的常用方法 大数据处理目前比较流行的是两种方法，一种是离线处理，一种是在线处理，基本处理架构如下：在互联网应用中，不管是哪一种处理方式，其基本的数据来源都是日志数据，例如对于web应用来说，则可能是用户的访问日志、用户的点击日志等。如果对于数据的分析结果在时间上有比较严格的要求，则可以采用在线处理的方式来对数据进行分析，如使用Spark、Storm等进行处理。比较贴切的...

20个顶级大数据软件应用程序

大数据框架

05-04

1万+

　如今，大数据技术对企业来说不再是一种尝试和体验，它已成为企业开展业务的一个重要组成部分。根据调研机构IDC公司的调查，2017年全球大数据和业务分析(BDA)的市场收入将达到1508亿美元，和2016年相比增长12.4%。到2020年，其收入将超过2100亿美元。　　这些大部分来自硬件和服务。对于大数据软件而言，在某些情况下，每家公司的需求都是基于垂直行业的独特需求。即使在同一行业，如零售行业...

典型行业大数据应用和安全风险和解决方案

maoguan121的博客

09-07

2910

大数据平台多使用开源软件，这些软件设计初衷主要考虑高效数据处理，缺乏安全性保障，滞后于电信业务发展的安全防护能力，存在安全隐患。

八个典型的大数据应用案例

学无止境

12-24

6635

什么是大数据？不要再举例说啤酒和尿布的例子了，Gartner的分析师Doug Laney在讲解大数据案例时提到过8个更有新意更典型的案例，可帮助更清晰的理解大数据时代的到来。　　1. 梅西百货的实时定价机制。根据需求和库存的情况，该公司基于SAS的系统对多达7300万种货品进行实时调价。　　2. Tipp24 AG针对欧洲博彩业构建的下注和预测平台。该公司用KXEN软件来分析数十亿

大数据应用的现实案例

NilEcho2333的博客

09-08

4142

互联网企业拥有大量的线上数据，而且数据量还在快速增长，除了利用大数据提升自己的业务之外，互联网企业已经开始实现数据业务化，利用大数据发现新的商业价值。以阿里巴巴为例，它不仅在不断加强个性化推荐、“千人千面”这种面向消费者的大数据应用，并且还在尝试利用大数据进行智能客户服务，这种应用场景会逐渐从内部应用延展到外部很多企业的呼叫中心之中。在面向商家的大数据应用中，以“生意参谋”为例，超过 600 万商家在利用“生意参谋”提升自己的电商店面运营水平。除了面向自己的生态之外，阿里巴巴数据业务化也在不断加速，

大数据与云计算应用

L2944426458L的博客

01-11

6118

什么是云计算就像生活中的水、电、煤等利用着的IT资源都无时无刻的按人们自己的需求使用而水、电、煤，这些呢是属于资源性产品 IT资源就是计算存储网络资源云计算的定义按需使用IT资源和应用程序，通过互联网，按使用量付费。美国联邦云计算战略报告中，定义了四种云公有云：提供公共的IT资源缺点：保密性较低私有云：提供给政府、学校等机构优点：保密性高社会云：提供给研究人员使用混合云：包含以上任意两种云生活中的例子出行论买车——公有云开车...

大数据应用解决方案

06-25

典型的大数据应用架构包括数据采集层、数据处理层、数据分析层和数据展现层。 - **数据采集层**：负责收集各种原始数据。 - **数据处理层**：对收集的数据进行清洗、转换等预处理工作。 - **数据分析层**：采用机器...

智慧交通视频大数据应用平台建设方案.pptx

07-29

【智慧交通视频大数据应用平台建设方案】智慧交通视频大数据应用平台是现代城市交通管理的关键组成部分，旨在通过先进的信息技术，如视频语义理解、多传感器融合和云计算应用，提升交通系统的效率和安全性。此平台...

典型大数据平台监控运维实战 (1).zip

05-10

5. **大数据平台监控**：监控是运维的关键环节，涉及对硬件资源、软件服务、应用性能等多维度的实时监控。常用的工具有Hadoop Metrics2、Ganglia、Ambari等，它们能帮助识别性能瓶颈、预测故障，确保平台的高可用性...

大数据系统软件创新平台与生态建设.pdf

11-17

大数据系统软件是大数据技术的核心组成部分，它连接着大数据计算平台和应用软件，负责对分布式硬件资源进行抽象管理，为大数据处理提供基础功能，如一体化存储、分析框架、全生命周期数据工程和安全保障。...

大数据技术原理与应用笔记

Moliay的博客

02-13

2280

三次信息化浪潮。

Python 如何调用讯飞星火大模型API

hello_1995的博客

09-21

1139

讯飞星火是科大讯飞推出的一款先进的人工智能大模型，它具备强大的语言理解和知识问答能力，能够在多种场景中提供智能化服务。2024年6月27日，科大讯飞发布了讯飞星火大模型V4.0版本，全面对标GPT-4 Turbo。

elasticsearch学习与实战应用

最新发布

cesske的博客

09-22

1014

Elasticsearch的学习与实战应用是一个涉及多个方面的过程，以下将从学习路径、核心概念、实战应用及优化策略等方面进行详细介绍。提示：以下是本篇文章正文内容，下面案例可供参考综上所述，Elasticsearch的学习与实战应用是一个系统而复杂的过程，需要不断学习和实践。通过掌握基础知识、进阶知识和实战操作技巧，并结合优化策略来提高性能和可靠性，可以充分发挥Elasticsearch在数据处理和搜索分析方面的优势。

阿里1688一面总结

weixin_44804108的博客

09-19

692

发布-订阅模式，即当实验发生变更时，就发出一个变更事件，然后，每台机器感知到这个变更事件后，清空本地缓存，触发reload操作。为了避免大量请求打到DB，可以对查询请求进行加锁，保证相同的实验只有一个线程去查，然后更新到缓存中，其他的请求，走缓存查询结果。运维团队将扩缩容事件投递在kafka中，容量平台起一个线程去订阅变更事件，当有事件时，更新公共缓存中的数据。kafka单broker的消息是可以保证顺序性的，但是kafka集群的消息实际是无序的。首先，面试官进行对业务进行介绍，然后，候选人进行自我介绍。

HBASE_题库详解

chuige2013的博客

09-19

1013

如果Rowkey 是按时间戳的方式递增，不要将时间放在二进制码的前面，建议将Rowkey的高位作为散列字段，由程序循环生成，低位放时间字段，这样将提高数据均衡分布在每个Regionserver 实现负载均衡的几率。最后但不是最重要的--为了运行Hbase，Zookeeper是必须的，zookeeper是一个用来进行分布式协调的服务，这些服务包括配置服务，维护元信息和命名空间服务。它支持四种主要的操作：增加或者更新行，查看一个范围内的cell，获取指定的行，删除指定的行、列或者是列的版本。