- 博客(5)
- 收藏
- 关注
RSS订阅转载 大数据导论（5）——大数据的存储（分布式、NoSQL、集群、CAP、ACID、BASE）
大数据从获取到分析的各个阶段都可能会涉及到数据集的存储，考虑到大数据有别于传统数据集，因此大数据存储技术有别于传统存储技术。大数据一般通过分布式系统、NoSQL数据库等方式（还有云数据库）进行存储。同时涉及到以下几个新理念。本篇summary主要围绕以下三方面内容：大数据存储方案（分布式系统、NoSQL数据库系统）；分布与集群、数据分布的途径；数据库设计时涉及到...
2018-11-09 15:16:00
1511
转载 大数据导论（4）——OLTP与OLAP、数据库与数据仓库
公司内部的数据自下而上流动，同时完成数据到信息、知识、洞察的转化过程。而企业内部数据，从日常OLTP流程中产生，实时存储进不同的数据库中。同时定期被提取、经格式转化、清洗和加载（ETL），以统一的格式存储进数据仓库，以供决策者进行OLAP处理，并将处理结果可视化。OLTP & OLAP企业的数据处理可以分成两大类：联机事务处理OLTP、联机分析处理OLAP。OLT...
2018-11-02 14:26:00
666
转载 大数据导论（3）——采用大数据解决方案前的考虑因素、大数据分析的生命周期...
大数据项目由业务驱动，一套完整且优秀的大数据解决方案对企业的发展具有战略性意义。由于数据来源多样，导致来自不同数据源的数据类型、规模等具有不同的特征。在处理分析大数据时，将涉及到更多维度（治理、安全等）。因此在采用大数据分析前，需对项目的整个管理流程和决策框架提前考虑。需要考虑到的内容主要有：1.先决条件优质数据、完善的流程、优秀的员工、预设持续周期。2.数据获...
2018-10-26 20:19:00
649
转载 大数据导论（2）——推动大数据发展主要的商业因素（业务架构、业务流程管理、通信技术、万物互联等）...
推动大数据行业发展主要的商业因素主要有以下几种：1. 市场动态：经济的全球化使得全球的公司都处于紧密相连的产品和业务网中。因此公司需要外部数据源来感知市场、完成自我定位。同时借助合适的技术和工具，完成从描述客观事实的数据到有价值信息的转化。2. 业务架构：架构——是能够支持某种体系运行的体系化且完备内在结构。架构不是面向具体功能的，而是面向...
2018-10-25 15:57:00
785
转载 大数据导论（1）——“大数据”相关概念、5V特征、数据类型
在过去的十几年中，各个领域都出现了大规模的数据增长，而各类仪器、通信工具以及集成电路行业的发展也为海量数据的产生与存储提供了软件条件与硬件支持。大数据，这一术语正是产生在全球数据爆炸式增长的背景下，用来形容庞大的数据集合。由于大数据为挖掘隐藏价值提供了新的可能，如今工业界、研究界甚至政府部门等各行各业都对大数据这一研究领域密切关注。尽管目前大数据的重要性已被社会各界认同...
2018-10-25 15:48:00
3368
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人