- 博客(8)
- 收藏
- 关注
RSS订阅原创 Hadoop架构
Hadoop基本架构什么是Hadoop？ Hadoop架构是一个开源的、基于Java的编程框架，设计用于跨电脑集群来处理大数据。Hadoop架构管理多个节点之间的数据传输，确保即使有一个节点坏掉了，系统仍然保有适当的功能。 Hadoop架构有两个主要的组件：分布式文件系统和MapReduce引擎。主要的分布式文件系统是Hadoop分布式文件系统（HDFS），这里存储着程序。MapReduce引擎是用于执行程序的
2020-12-17 20:14:21
208
原创 大数据安全
引言 大数据时代来临，各行业数据规模呈TB级增长，拥有高价值数据源的企业在大数据产业链中占有至关重要的核心地位。 在实现大数据集中后，如何确保网络数据的完整性、可用性和保密性，不受到信息泄漏和非法篡改的安全威胁影响，已成为政府机构、事业单位信息化健康发展所要考虑的核心问题。大数据安全概况a）标准化现状： 网络安全等级保护  
2020-11-24 11:50:49
2332
原创 数据可视化
数据可视化是对数据的可视化表示的一种科学技术研究。其中，数据的可视化表示定义为以某种汇总形式提取的信息，包括相应信息单元的各种属性和变量。 它是一个处于不断演变之中的概念，其边界在不断地扩大。主要指的是技术上较为高级的技术方法，而这些技术方法允许利用图形、图像处理、计算机视觉以及用户界面，通过表达、建模以及对立体、表面、属性以及动画的显示，对数据加以可视化解释。与立体建模之类的特殊技术方法相比，数据可视化所涵盖的
2020-11-23 21:41:57
549
原创 大数据分析
大数据分析简介 大数据分析是指对规模巨大的数据进行分析。 大数据分析的产生旨在于IT管理，企业可以将实时数据流分析和历史相关数据相结合，然后大数据分析并发现它们所需的模型。反过来，帮助预测和预防未来运行中断和性能问题。进一步来讲，他们可以利用大数据了解使用模型以及地理趋势，进而加深大数据对重要用户的洞察力。他们也可以追踪和记录网络行为，大数据轻松地识别业务影响；随着对服务利用的深刻理解加快利润增长；同时跨多系统收
2020-11-23 17:21:12
331
原创 大数据的存储
一、云存储 云存储是在云计算（cloud computing）概念上延伸和发展出来的一个新的概念，是指通过集群应用、网络技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。 当云计算系统运算和处理的核心是大量数据的存储和管理时，云计算系统中就需要配置大量的存储设备，那么云计算系统就转变称为一个云存储系统，所以云存储是一个以数据存
2020-11-20 22:07:13
4924
原创 大数据处理
大数据处理的基本流程 大数据处理流程主要包括数据收集、数据预处理、数据存储、数据处理与分析、数据展示/数据可视化、数据应用等环节，其中数据质量贯穿于整个大数据流程，每一个数据处理环节都会对大数据质量产生影响作用。通常，一个好的大数据产品要有大量的数据规模、快速的数据处理、精确的数据分析与预测、优秀的可视化图表以及简练易懂的结果解释。 一、数据收集 搭建数据仓库，数据
2020-11-19 15:47:15
2194
原创 大数据概述
大数据概述什么是大数据 对于“大数据”（Big data）研究机构Gartner给出了定义，“大数据”是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 大数据技术的战略意义不在于掌握庞大的数据信息，而在于对这些含有意义的数据进行专业化处理。换言之，如果把大数据比作一种产业，那么这种产业实现盈利的关键，在于提高对数据的“加工能力”，通过“加工”实现数据的“增值”。
2020-11-19 13:56:40
667
原创 云计算概述
云计算概述一、云计算的定义云计算（cloud computing），是分布式计算技术的一种，其最基本的概念，是透过网络将庞大的计算处理程序自动分拆成无数个较小的子程序，再交由多部服务器所组成的庞大系统经搜寻、计算分析之后将处理结果回传给用户。透过这项技术，网络服务提供者可以在数秒之内，达成处理数以千万计甚至亿计的信息，达到和“超级计算机”同样强大效能的网络服务。二、云计算的意义服务提供商：快速部署、缩小主机规模、 提高资源利用率、提高管理效率、降低运维成本、基础设施可以防止在低徒弟和能源成本的地区、
2020-09-17 22:25:26
531
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人