典型的大数据应用软件

最新推荐文章于 2024-09-19 15:53:35 发布
最新推荐文章于 2024-09-19 15:53:35 发布
阅读量107 收藏
点赞数
文章标签： 大数据 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/karo_lee/article/details/84596802
版权

数据摄取层                         Apache Flume,Storm

 

Hadoop存储                       HDFS

 

NoSQL数据库                     HBase,Cassandra

 

规则引擎                             MapReduce任务

 

管理平台

查询工具                          MapReduce,Pig,Hive

 

查询引擎                          Solr

 

协作工具                         Zookeeper.Oozie

 

分析引擎                        Ｒ，Pentaho

 

可视化工具                     Tableau,Clickview,Spotfire

 

大数据分析应用              EMC Greenplum,IBM Netezza,IBM Pure Systems,Oracle Exalytics

 

监控                                Ganglia,Nagios

 

数据集成ＩＤＥ             Talend,Pentaho

 

Hadoop管理                  Cloudera,DataStax,Hortonworks,IBM Big Insights

 

公共云虚拟平台             Amazon AWS & S3,Rackspace

 

karo_lee
关注
大数据讲课笔记2.2 大数据应用场景
howard2005的专栏
10-03 1811
1. 熟悉大数据在医疗行业的应用； 2. 熟悉大数据在金融行业的应用； 3. 熟悉大数据在零售行业的应用； 4. 熟悉大数据在教育行业的应用； 5. 熟悉大数据在智慧城市的应用； 6. 熟悉大数据在农业中的应用； 7. 熟悉大数据在环保中的应用
5. 工业大数据典型应用
补补7的博客
08-24 610
优化现有业务，实现提质增效； 促进企业升级转型； 促进中小企业创新创业
大数据分析--数据清洗和准备
10-09
在数据分析和建模的过程中，相当多的时间要用在数据准备上：加载、清理理、转换以及重塑。这些工作会占到分析师时间的80%或更更多。
大数据采集、清洗、处理：使用MapReduce进行离线数据分析完整案例
热门推荐
leeyu的博客
04-23 2万+
1 大数据处理的常用方法 大数据处理目前比较流行的是两种方法，一种是离线处理，一种是在线处理，基本处理架构如下： 在互联网应用中，不管是哪一种处理方式，其基本的数据来源都是日志数据，例如对于web应用来说，则可能是用户的访问日志、用户的点击日志等。 如果对于数据的分析结果在时间上有比较严格的要求，则可以采用在线处理的方式来对数据进行分析，如使用Spark、Storm等进行处理。比较贴切的...
20个顶级大数据软件应用程序
大数据框架
05-04 1万+
　如今，大数据技术对企业来说不再是一种尝试和体验，它已成为企业开展业务的一个重要组成部分。根据调研机构IDC公司的调查，2017年全球大数据和业务分析(BDA)的市场收入将达到1508亿美元，和2016年相比增长12.4%。到2020年，其收入将超过2100亿美元。 　　这些大部分来自硬件和服务。对于大数据软件而言，在某些情况下，每家公司的需求都是基于垂直行业的独特需求。即使在同一行业，如零售行业...
典型行业大数据应用和安全风险和解决方案
maoguan121的博客
09-07 2900
大数据平台多使用开源软件，这些软件设计初衷主要考虑高效数据处 理，缺乏安全性保障，滞后于电信业务发展的安全防护能力，存在安全隐 患。
八个典型的大数据应用案例
学无止境
12-24 6631
什么是大数据？不要再举例说啤酒和尿布的例子了，Gartner的分析师Doug Laney在讲解大数据案例时提到过8个更有新意更典型的案例，可帮助更清晰的理解大数据时代的到来。 　　1. 梅西百货的实时定价机制。根据需求和库存的情况，该公司基于SAS的系统对多达7300万种货品进行实时调价。 　　2. Tipp24 AG针对欧洲博彩业构建的下注和预测平台。该公司用KXEN软件来分析数十亿
大数据应用的现实案例
NilEcho2333的博客
09-08 4137
互联网企业拥有大量的线上数据，而且数据量还在快速增长，除了利用大数据提升自己的业务之外，互联网企业已经开始实现数据业务化，利用大数据发现新的商业价值。 以阿里巴巴为例，它不仅在不断加强个性化推荐、“千人千面”这种面向消费者的大数据应用，并且还在尝试利用大数据进行智能客户服务，这种应用场景会逐渐从内部应用延展到外部很多企业的呼叫中心之中。 在面向商家的大数据应用中，以“生意参谋”为例，超过 600 万商家在利用“生意参谋”提升自己的电商店面运营水平。除了面向自己的生态之外，阿里巴巴数据业务化也在不断加速，
大数据与云计算应用
L2944426458L的博客
01-11 6106
什么是云计算 就像生活中的水、电、煤等利用着的IT资源都无时无刻的按人们自己的需求使用 而水、电、煤，这些呢是属于资源性产品 IT资源就是计算存储网络资源 云计算的定义 按需使用IT资源和应用程序，通过互联网，按使用量付费。 美国联邦云计算战略报告中，定义了四种云 公有云：提供公共的IT资源 缺点：保密性较低 私有云：提供给政府、学校等机构 优点：保密性高 社会云：提供给研究人员使用 混合云：包含以上任意两种云 生活中的例子 出行论 买车——公有云 开车...
大数据应用解决方案
06-25
典型的大数据应用架构包括数据采集层、数据处理层、数据分析层和数据展现层。 - **数据采集层**：负责收集各种原始数据。 - **数据处理层**：对收集的数据进行清洗、转换等预处理工作。 - **数据分析层**：采用机器...
智慧交通视频大数据应用平台建设方案.pptx
07-29
【智慧交通视频大数据应用平台建设方案】 智慧交通视频大数据应用平台是现代城市交通管理的关键组成部分，旨在通过先进的信息技术，如视频语义理解、多传感器融合和云计算应用，提升交通系统的效率和安全性。此平台...
典型大数据平台监控运维实战 (1).zip
05-10
5. **大数据平台监控**：监控是运维的关键环节，涉及对硬件资源、软件服务、应用性能等多维度的实时监控。常用的工具有Hadoop Metrics2、Ganglia、Ambari等，它们能帮助识别性能瓶颈、预测故障，确保平台的高可用性...
大数据系统软件创新平台与生态建设.pdf
11-17
大数据系统软件是大数据技术的核心组成部分，它连接着大数据计算平台和应用软件，负责对分布式硬件资源进行抽象管理，为大数据处理提供基础功能，如一体化存储、分析框架、全生命周期数据工程和安全保障。...
6个大数据应用案例
雪兽软件
03-01 5864
根据市场数据预测报告，到2026年，全球大数据市场可能达到2684亿美元。随着大数据市场的快速增长，组织正在利用大数据来获得洞察力，帮助他们做出更好的决策，改善运营，最终推动最佳增长。从医疗保健到金融，从零售到电信，大数据正被用于改变行业的运作方式，使企业能够创造新的收入来源，增强客户体验，提高运营效率。这个全面的博客将探索令人兴奋的大数据用例领域，探索商业组织如何利用数据获得洞察力，推动创新，并取得巨大的成功。因此，让我们深入了解大数据如何改变行业并创造新的商业可能性。
阿里1688一面总结
最新发布
weixin_44804108的博客
09-19 113
发布-订阅模式，即当实验发生变更时，就发出一个变更事件，然后，每台机器感知到这个变更事件后，清空本地缓存，触发reload操作。为了避免大量请求打到DB，可以对查询请求进行加锁，保证相同的实验只有一个线程去查，然后更新到缓存中，其他的请求，走缓存查询结果。运维团队将扩缩容事件投递在kafka中，容量平台起一个线程去订阅变更事件，当有事件时，更新公共缓存中的数据。kafka单broker的消息是可以保证顺序性的，但是kafka集群的消息实际是无序的。首先，面试官进行对业务进行介绍，然后，候选人进行自我介绍。
【大数据】探索怎么从一段话中解析关键信息（寄件人相关信息）
一个不断前行的程序者
09-12 710
通过使用Spacy的NLP功能，我们成功实现了从文本中提取姓名、地址和电话号码的功能。需要注意的是，这个简单的示例可能在处理复杂文本时效果不佳，实际应用中可能需要进一步的优化和训练。此外，对于电话号码的识别，我们简单地使用了数字长度作为判断依据，这并不准确。在实际应用中，我们可以使用正则表达式来更准确地识别电话号码。希望这个博客能够帮助你了解如何使用NLP技术实现文本信息解析功能。如果有任何疑问，欢迎在评论区留言讨论！
kafka消息发送几种方式
happycao123的博客
09-12 531
有些发送异常可以通过重试几次后解决，比如网络异常，对于有些异常比如消息太大超出kafka配置的最大消息字节数，这类异常重试也会失败，所以这类异常KafkaProducer 不会进行任何重试。有没有办法既要异步发送还要能处理发送失败的场景，这就是第三种，发送完成时，执行相应的回调方法。：等待发送结果返回，这种方式是可靠的，因为异常能及时处理，但同步发送需要阻塞等待一条消息发送完才处理下一条，吞吐量差。发送是异步的，不关心发送的结果，吞吐量最高，但可能存在发送失败的情况。分为同步发送、异步发送。
你天天用微服务还不知道心跳检测机制是什么？
无休居士的博客
09-13 1319
心跳检测机制是一种保持连接状态和验证服务实例是否存活的技术。服务提供者：主动发送心跳包的服务方。服务消费者：接收心跳包并验证服务状态的一方。服务注册中心：用于管理服务实例的注册和发现，通常也是心跳检测的中心节点。Eureka：专注于服务发现，适用于 Spring Cloud 生态系统。Consul：提供全面的服务管理功能，适合需要更复杂服务管理的场景。Zookeeper：适用于需要强一致性和协调服务的场景。Etcd：适用于需要简单键值存储和配置管理的场景，特别是在容器编排系统中。
大数据应用与解决方案探索
医疗、能源、通信和零售业是大数据应用的典型例子。医疗行业利用大数据进行疾病预测、患者健康管理；能源行业通过大数据优化能源分配和提高效率；通信行业运用大数据进行网络优化、客户行为分析；零售业则依赖大数据...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值