- 博客(9)
- 收藏
- 关注
RSS订阅原创 大数据的分析
1.2数据分析方法1）数据分析方法：数据分析是指数据收集、处理并获取数据信息的过程。通过数据分析，人们可以从杂乱无章的数据当中获取有用的信息，从而找出研究对象的内在规律。2）数据来源：数据作为第四次工业革命的战略资源，全球各国都在大力发展数据基础信息平台的建设，用以改善数据的采集、存储、传输及管理的效率，从而提升信息服务水平3）数据分析活动步骤：大数据分析包括五个阶段，1）数据获取及储存2）数据信息抽取及无用信息的清洗3）数据整合及表示4）数据模型的建立和结果分析5）结果阐释4）分析数据：
2020-12-27 19:56:02
3029
原创 大数据的分析
1.1数据分析概念和分类数据分析概念和分类数据分析是指收集、处理数据并获取数据隐含信息的过程。大数据具有数据量大、数据结构复杂、数据产生速度快、数据价值密度低等特点，这些特点增加了对大数据进行有效分析的难度，大数据分析(Big Data Analytics, BDA)成为当前探索大数据发展的核心内容。数据分析主要作用包括：● 推测或解释数据并确定如何使用数据；● 检查数据是否合法；● 给决策制定合理建议；● 诊断或推断错误原因；● 预测未来将要发生的事情。数据分析的类型根据数据分析深度，
2020-12-26 22:50:42
2185
原创 大数据中心
1.1面临的挑战 1系统问题：面对大数据的爆炸式增长，且具有大数据量，异构型，高时效性的需求时，数据的存储不仅仅有存储容量的压力，还给系统的存储性能，数据管理乃至大数据的应用方面带来了挑战。 2：管理问题：这些大量的数据复杂，种类繁多，如何对分布，多态，异构的大数据进行管理的问题已经不期而至，传统的数据存储方式面对大数据的猛烈增长已不能满足需求，需要开展分布式存储的研究。 3：应用问题：随着数据量的爆炸增长，不断刺激着计算机技术的发展，如何利用大数据为人们生活所用，即时大数据的应用问题。大
2020-12-26 17:13:13
726
1
原创 大数据处理
1.1数据采集 1数据采集方法1>系统日志采集：使用日志收集系统，收集业务日志数据提供离线和在线的分析系统使用2>网络数据采集：通过网络爬虫或网站公开API等方式从网站上获取数据信息，可以将非结构化数据以结构化的方式存储3>数据库采集：在采集端部署大量数据库，并对如何在这些数据库之间进行负载均衡和分布进行深入的思考和设计2数据质量的评估标准1>完整性2>一致性3>准确性4>及时性3数据质量的影响因素...
2020-12-19 10:49:25
1242
1
原创 大数据技术的概论（2）
1.5大数据带来多大变革1技术变革特征2管理模式变革（人力，流程，制造，市场）1）数据资产化2）决策智能化3信息技术IT向数据技术DI的转变
2020-12-18 16:21:02
1608
2
原创 大数据技术的概述（1）
1.1大数据技术的产生1.1.1数据基础知识：信息系统的表达上，可以把数据放在输入端，信息放在输出端。从信息的角度看数据可以从数据的输入和输出的位置得到理解。1）人们掌握数据资源的目的是为了提炼加工数据为有用的资源，称为信息；2）在信息的基础上提炼和总结成具有普遍指导意义 的内容，包括共性规律，理论，模型模式方式等称为知识；3）运用知识，结合经验创造性的预测未来解释现象和问题，发觉为了：智慧。1.1.2大数据的形成...
2020-12-17 17:20:38
2494
原创 云计算的初步
1.4.2平台即服务PaaS:PaaS:是把应用服务的运行和开发环境作为一种服务提供的商业模式。PaaS的关键技术：1>分布式的并行计算：为了充分利用广泛部署的普通技术资源实现大规模运算和应用的目的，实现真正将传统运算转化为并行计算，为客户提供并行服务。2>大文件分布式存储：为了解决海量数据存储在廉价的不可信结点集群构架上数据安全性及运行性的保证。1.4.3软件即服务SaaSSaaS的关键技术是多租户技术，1.4.4三种服务模式之间的关系：SaaS——普通用户（供应商需要提供的
2020-12-13 10:27:36
223
原创 云计算的初步认识
第一章 云计算概论 初步认识：云计算是基于互联网的相关服务的增加，使用和交付模式，通常涉及通过互联网来提供动态易扩展且常为虚拟化的资源，是并行计算，分布式计算和网络计算等的融合和发展，也是虚拟化，效用计算，面向服务架构等概念混合演进后商业实现的结果。基本了解：✔什么是云计算：1.1.1:云计算的定义1> 维基百科：云计算是一种动态扩展的计算模式，通过计算机网络将虚拟化...
2020-12-07 14:18:20
486
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人