![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
BIGDATA
Lusoel
这个作者很懒,什么都没留下…
展开
-
Flume-ng 1.7.0 安装、配置及说明之1-直接读取Nginx日志存入HDFS
一、简介Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统,它可以实时的将分布在不同节点、机器上的日志收集起来保存或转入下一结点进行处理分析。Flume 初始的发行版本是Cloudera开发的,版本名叫Flume OG(original generation)。随着版本的发展,系统变得越来越臃肿,日志传输不稳定等。为了解决这些问题,Cloudera对系统的核心进行的重构,重原创 2016-12-29 14:05:55 · 3283 阅读 · 0 评论 -
Hadoop2.X配置管理1-HDFS安装配置单机版
HDFS:分布式文件系统(Hadoop Distributed File System)的缩写,是大数据分析中对文件的分布式存储的基础支持。这里主机价绍单机部署HDFS系统的安装与配置步骤,用以指导初学者了解。1.系统环境及要求硬件:以一台双核2G虚拟机系统:CentOS 6.3 64bitJDK: JDK 7(hadoop 2.7.3最低要求1.7,不支持1.6)原创 2016-12-26 16:05:55 · 1034 阅读 · 0 评论