2016 | 大数据平台类产品资讯汇总

最新推荐文章于 2024-08-01 16:11:59 发布
最新推荐文章于 2024-08-01 16:11:59 发布
阅读量99 收藏
点赞数
文章标签： 大数据 python 数据库
原文链接：https://my.oschina.net/u/2509910/blog/794178
版权

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

InfoSphere Streams 平台支持流数据的实时处理，支持不断更新持续查询的结果，可在移动的数据流中检测洞察。

IBM构建了BigInsights平台来为用户提供从大量的信息中提取有用信息进行分析决策的解决方案，它被用来解决在当前信息分析中亟待解决的几大问题：极大数据量的处理，数据来源的多样性，数据分析的敏捷性，数据分析的持久性。随着 BigInsights 的不断发展，我们将支持更多的基于 Hadoop 的开源项目，根据用户的特定需求提供更多更好的解决方案。

Hadoop是一个能够让用户轻松架构和使用的分布式计算平台。用户可以轻松地在Hadoop上开发和运行处理海量数据的应用程序。Spark 是一种与 Hadoop 相似的开源集群计算环境，但是两者之间还存在一些不同之处，这些有用的不同之处使 Spark 在某些工作负载方面表现得更加优越，换句话说，Spark 启用了内存分布数据集，除了能够提供交互式查询外，它还可以优化迭代工作负载。

其它类别

更多大数据与分析相关行业资讯、解决方案、案例、教程等请点击查看>>>

 

转载于:https://my.oschina.net/u/2509910/blog/794178

weixin_34250709
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
大数据平台构建_如何像产品一样构建数据平台
weixin_26746401的博客
08-22 388
大数据平台构建 重点 (Top highlight)Over the past few years, many companies have embraced data platforms as an effective way to aggregate, handle, and utilize data at scale. Despite the data platform’s rising p...
终于把大数据类产品全流程解释清楚了
yimenglin的博客
06-20 6459
你点开这文章，说明你清晰知道了数据才是一切的基础。人工智能、机器学习、大数据等应用的基础都是基于这样的一个流程，只是说运用领域不同，那么偏重点不同。本文从数据采集到数据报告，详细说明了大数据运用过程与环节，为大家树立整体的意识。数据采集(DAQ)数据采集，又称数据获取，这就是数据的来源，一般数据是来源于自身业务开展中的信息，比如自己的数据库日志，交易流水等；另外就是除了自身数据外，可以使用第三方外...
京东用了哪些大数据平台产品体系？
程序之道的博客
04-01 9634
对于京东大数据平台来说，数据产品并不是一个新鲜事物，2011年自建数据仓库上线的同时，第一款数据产品调度平台也一同上线并正式投入使用。 调度平台 订单交易，仓储物流等众多京东系统都会产生数据，仅日志内容每天的大小约为1TB，大量的数据如何统一汇总到数据仓库来呢?这就需要调度产品来实现数据生产。京东调度平台发展至今已经是3.0版本，每一次的更新迭代都凝聚着京东大数据平台开发工程师许许多多个日夜的...
大数据平台常见开源工具有哪些？
a1254482024的博客
07-02 1430
大数据平台是对海量结构化、非结构化、半机构化数据进行采集、存储、计算、统计、分析处理的一系列技术平台。大数据平台处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据仓库工具无法处理完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的各类技术。 大数据平台常见的一些工具汇集 主要包含：语言工具类、数据采集工具、ETL工具...
大数据平台产品开发
myhuizhi的博客
11-05 1649
本文就作者在大数据产品开发的经验，从大数据的产品规划、项目管理、架构设计等三个方面，讨论大数据产品的构建过程。 由于时间关系，先列出目录，后续补充。 一、大数据产品--产品规划篇 什么产品规划 如何进行产品规划 IPD(集成化产品开发流程) 二、大数据产品--项目管理篇 大数据产品开发--团队组建 大数据产品开发--研发流程管理 大数据产品开发...
大数据系列2020-大数据基础资料汇总（精选）.zip
04-28
本压缩包文件“大数据系列2020-大数据基础资料汇总（精选）.zip”是针对大数据基础知识的一个精选合集，包含了多个方面的学习材料，旨在帮助读者全面理解和掌握大数据技术。 首先，文件“大数据技术之高频面试题...
大数据知识汇总一.pdf
11-29
大数据定义为巨量资料(big data)，或称大数据、海量资料，指的是所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。 大数据是一...
纸牌屋与大数据25.ppt
11-23
3. 它让更多的创业者更方便地开发产品，比如通过社交网络来收集数据的健康类App。 大数据技术的发展将对各行各业产生深远的影响，我们需要正确地认识大数据的价值和作用，从而更好地应用大数据技术，提高核心竞争力...
大数据研究现状及热点应用介绍+051256.pptx
09-23
计世资讯预测，中国大数据市场自2011年开始启动，2013年增速将达到138.3%，到2016年市场规模将接近100亿元人民币。 大数据的应用不仅限于商业领域，也渗透到科学实验中。例如，孟德尔的豌豆实验就是一个早期的大...
大数据时代-数据仓库基本知识点汇总.pdf
06-01
大数据时代-数据仓库基本知识点汇总 大数据时代，企业面临着海量数据的洪潮，如何将这些数据转换为有价值的信息和知识，已经成为了企业提高核心竞争力的主要瓶颈。数据仓库作为一种主要技术手段，能够将数据转换为...
干货|盘点国内真正的大数据分析产品
weixin_34384915的博客
07-23 1238
本文来自网易云社区。 下面简单介绍几款比较有代表性的大数据分析平台：   1、 Cloudera 作为全球认知度最高的大数据平台公司，国内90%的版本基本都是在CDH的基础上封装的，对社区的掌控力最大。与国际软件供应商联手，产品涵盖大数据平台、ETL、高级分析、数据可视化等各个方面。Cloudera提供一个可扩展、灵活、集成的平台，可用来方便的管理您的企业中快速增长的多种多样的数据，从而部...
hive的内部表（MANAGED_TABLE）和外部表（EXTERNAL_TABLE）的区别
最新发布
qq_58462591的博客
08-01 200
外部表：外部表的存储在hdfs中，是我们指定的文件目录，当我们删除数据或者删除分区的时候不会将元数据删除，数据还会在hdfs目录中，我们还可以进行数据挂载。内部表：内部表的存储是在hdfs的默认目录下，当我们删除数据或者删除分区的时候会将元数据删除，数据文件也会被删除。运行指令找到table_type 如果为MANAGED_TABLE，那就是内部表，内部表和外部表的主要区别在于数据的存储方式。如果是EXTERNAL_TABLE,那就是外部表。
大数据信用查询什么样的平台比较靠谱?
xiaoyikj的博客
08-01 508
随着互联网的发展和普及，大数据技术逐渐应用到各行各业中，其中之一就是信用查询领域，大数据信用查询平台能够为用户提供全面、准确的大数据信用评估，然而，由于市场上出现了许多不同的大数据信用查询平台，我们如何才能选择一个靠谱可信的平台呢?市面上很查询大数据的平台都只有一个单链接，用户查询完成之后，对报告有不清楚的地方，根本没有办法找到专人为其分析，如果一份报告自己看不懂，没有人解答，那么这次的钱就是白花了，而小易大数据平台则是市面上为数不多的提供大数据报告免费解读的平台，深受用户好评。
Flink DataStream API编程入门
L
08-01 137
DataStream API的名称来自于DataStream类，该类用于表示Flink程序中的数据集合。您可以将它们视为包含重复项的不可变数据集合。这些数据可以是有限的，也可以是无限的，但是用于处理它们的API是相同的。在使用方面，数据流与常规Java Collection类似，但在一些关键方面有很大不同。DataStream是不可变的，这意味着一旦创建了它们，就不能添加或删除元素。您不仅可以简单地检查其中的元素，还可以使用DataStream API算子（也称为转换）对它们进行处理。
消息队列-rabbitmq（生产者.消费者. 消息.可靠性）
2202_75352238的博客
07-28 892
在我们 生产者发送消息到交换机的时候，假如 我们发送到交换机 ，但是 队列没有收到消息，会返回ack，发送到交换机，然后发送到队列，消费者没有接收到消息返回ack，但是发送到交换机失败，会返回nack。死信交换机 ，都是假如一个定时消息过期了，或者发送延迟消息我们直接把该消息传递到我们绑定的死信交换机中，跟上文 消息发送失败了返回rejct之后，消息发送到err交换机是两种不同的策略。当一条消息发送失败的时候，消费者重新尝试消费消息，达到我们重试的次数之后，消费者返回reject，mq直接删除消息。
超13万律师使用的工具，启信宝推出“司法大数据”功能
INTSIG的博客
07-30 420
合合信息旗下的启信宝，作为行业领先的商业查询APP，依托其3亿企业及机构的实时动态数据，涵盖工商、股权、司法、知识产权等多维度信息，推出了“司法大数据”功能。
大数据技术原理-Hbase的安装和应用
m0_63931079的博客
08-01 932
本实验报告详细介绍了在“大数据技术原理”课程中进行的HBase实验。实验环境基于Hadoop生态系统，包括HBase和Java。实验内容涵盖了HBase的安装、版本查询、SSH登录、Hadoop与HBase的启动与关闭，以及通过HBase Shell命令实现数据的基本操作，如表的创建、数据的插入、删除和查询。关键词：HBase；大数据；Hadoop；Shell命令；数据操作
基于 SASL/SCRAM 让 Kafka 实现动态授权认证
zlt2000的博客
07-29 548
本文将从零开始部署ZooKeeper和Kafka并通过配置SASL/SCRAM和ACL（访问控制列表）来增强Kafka的安全性
SpringBoot整合Flink CDC实时同步postgresql变更数据，基于WAL日志
dylan的博客
07-31 687
在工作中经常会遇到要实时获取数据库（postgresql、mysql等）的变更数据，主要体现数据的实时性；【技术实现】java实时同步postgresql变更数据，基于WAL日志但是，之前的实现方式比较繁琐，不利于维护，所有本文整合Flink CDC通过一个比较简单的方式实现；Flink CDC（Change Data Capture）是一个基于Apache Flink构建的开源数据变更捕获（CDC）框架。
四方伟业大数据可视化平台产品白皮书
"大数据可视化平台产品白皮书-v1.5" 本文主要介绍的是成都四方伟业软件股份有限公司的大数据可视化平台产品，该产品旨在满足国家战略发展和各行业对大数据处理与分析的需求。公司凭借与华为多年的合作经验和专业...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值