大数据
文章平均质量分 90
白眉三狼
这个作者很懒,什么都没留下…
展开
-
Flume学习笔记
从阅读官网上的用户指南来学习Flume看官网的介绍Flume is a distributed, reliable, and available service for efficiently collecting, aggregating, and moving large amounts of log data. It has a simple and flexible archite...原创 2019-01-15 22:07:25 · 983 阅读 · 1 评论 -
大数据Hadoop生态系统各框架概述
一、什么是大数据?顾名思义,就是大量的数据。数据量太大,我们就无法在一定时间内用常规软件去处理这些数据,因此就有了大数据技术。二、Hadoop概述Hadoop框架包含HDFS、Yarn、MapReduce三个核心组件。1)HDFS大量的数据在一台计算机上存不下,就需要用很多计算机来存。多台计算机的存储容量可以存储大数据了,但是多台计算机却不方便管理大数据了,于是就有了Hadoo...原创 2019-03-05 14:55:20 · 1662 阅读 · 0 评论