cloudydream1-CSDN博客

原创云凡教育分享-Flume-0.9.4和Hbase-0.96整合(2)

Flume-0.9.4和Hbase-0.96整合(2)这几天由于项目的需要，需要将Flume收集到的日志插入到Hbase中，有人说，这不很简单么？Flume里面自带了Hbase sink，可以直接调用啊，还用说么？是的，我在本博客的《Flume-1.4.0和Hbase-0.96.0整合》文章中就提到如何用Flume和Hbase整合，从文章中就看出整个过程不太复杂，直接做相应的配置就行了。那

2014-09-30 01:45:48 511

原创 Flume-0.9.4和Hbase-0.96整合(1)

Flume-0.9.4和Hbase-0.96整合(1)这几天由于项目的需要，需要将Flume收集到的日志插入到Hbase中，有人说，这不很简单么？Flume里面自带了Hbase sink，可以直接调用啊，还用说么？是的，我在本博客的《Flume-1.4.0和Hbase-0.96.0整合》文章中就提到如何用Flume和Hbase整合，从文章中就看出整个过程不太复杂，直接做相应的配置就行了。那么为

2014-09-30 01:44:37 493

转载云凡教育分享-Flume-0.9.4源码编译依赖的thrift插件安装

Flume-0.9.4源码编译依赖的thrift插件安装　关于如何编译Flume-ng 1.4.0可以参见本博客的《基于Hadoop-2.2.0编译flume-ng 1.4.0及错误解决》　　在编译Flume-0.9.4源码的时候出现了以下的错误信息：01[INFO] ---------------------------------------------

2014-09-30 01:44:07 861

转载 Flume-0.9.4配置Hbasesink

Flume-0.9.4配置Hbasesink 在本博客的《Flume-1.4.0和Hbase-0.96.0整合》我们已经学习了如何使用Flume-1.4.0和Hbase-0.96.0进行整合。我们可以很容易的配置Hbase sink，并和最新版的Hbase整合，但是由于项目的特殊情况，我需要将Flume-0.9.4和Hbase-0.96整合，搞过这个的人应该知道，Flume-0.9.

2014-09-30 01:43:51 404

原创云帆教育大数据分享-Flume-0.9.4源码编译及一些编译出错解决方法

Flume-0.9.4源码编译及一些编译出错解决方法　由于需要在Flume里面加入一些我需要的代码，这时候就需要重新编译Flume代码，因为在编译Flume源码的时候出现了很多问题，所以写出这篇博客，以此分享给那些也需要编译代码的人一些参考，这里以如何编译Flume-0.9.4源码为例进行说明。　　首先下载Flume0.9.4源码(可以到https://repository.cloudera.co

2014-09-30 01:39:58 1521

转载 CentOS下载地址

CentOS下载地址下面的这些链接可以下载CentOS下面的这些链接可以下载CentOS001Actual Country - 002 003http://mirrors.hustunique.com/centos/6.5/isos/x86_64/Cen

2014-09-28 22:52:30 627

原创 Apache Kafka-0.8.1.1源码编译

Apache Kafka-0.8.1.1源码编译经过近一个月时间，终于差不多将之前在Flume 0.9.4上面编写的source、sink等插件迁移到Flume-ng 1.5.0，包括了将Flume 0.9.4上面的TailSource、TailDirSource等插件的迁移（当然，我们加入了许多新的功能，比如故障恢复、日志的断点续传、按块发送日志以及每个一定的时间轮询发送日志而不是等一个日志

2014-09-28 22:51:48 380

转载 Fedora下载地址

Fedora下载地址edora Project Bittorrent Tracker TorrentDescriptionSizeMapDate20Fedora-20-i386-DVD.torrentFedora 20 i386 DVD4.4GB

2014-09-28 22:51:08 739

转载 First Steps to Scala

First Steps to Scalaby Bill Venners, Martin Odersky, and Lex SpoonMay 9, 2007SummaryIn this article, you’ll followtwelve steps that are designed to help you understand and gain some basics

2014-09-28 22:49:31 964

转载 Flume-0.9.4分布式安装与配置手册

Flume-0.9.4分布式安装与配置手册　Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方，用于收集数据;同时，Flume提供对数据进行简单处理，并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力。　　Flume主要有以下几类组件：　　（1）、Master: 负责配置及通信管理，是集群的控制器，并支持多maste

2014-09-28 22:47:57 318

cloudydream1的专栏