大数据的基础知识

最新推荐文章于 2024-06-17 17:42:54 发布

逆风向上

最新推荐文章于 2024-06-17 17:42:54 发布

阅读量3.1k

点赞数 1

文章标签：大数据

本文链接：https://blog.csdn.net/qq_45563305/article/details/103579405

版权

本文介绍了大数据的基本概念，包括5V特点，以及大数据在不同领域的应用。接着详细讲解了Hadoop，这是一个分布式系统基础架构，用于高速运算和存储大规模数据。Hadoop包括HDFS、YARN和MapReduce组件。文章还探讨了Hadoop的版本区别，并概述了大数据体系和推荐系统框架。最后，提供了Hadoop运行环境的搭建步骤。

摘要由CSDN通过智能技术生成

1、大数据的基础知识

大数据的概念

大数据（big data），IT行业术语，是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法（抽样调查）这样捷径，而采用所有数据进行分析处理。大数据的5V特点（IBM提出）：Volume（大量）、Velocity（高速）、Variety（多样）、Value（低价值密度）、Veracity（真实性）。
百度百科：大数据

大数据主要解决了什么问题？