- 博客(10)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Avro Source配置详解
监听Avro端口和从外部Avro端接收事件流。当在另一个(上一个)Flume agent搭配内置Avro sink,它可以创建分层集合拓扑。以下为source配置时一些属性配置信息。channels： source指定channels,可以是多个,即fan-out,用空格分割type：组件类型名称,固定为 avrobind：监听的主机名称或者IP地址port：绑定监听的
2016-12-18 22:20:57
2038
原创 flume七：Flume Interceptors介绍
flume默认提供以下Interceptors：Timestamp Interceptor：a1.sources = r1a1.channels = c1a1.sources.r1.channels = c1a1.sources.r1.type = seqa1.sources.r1.interceptors = i1a1.sources.r1.interceptors
2016-12-18 21:16:43
372
原创 flume六：Event Serializers介绍
flume默认提供以下 Serializers：Body Text Serializer：a1.sinks = k1a1.sinks.k1.type = file_rolla1.sinks.k1.channel = c1a1.sinks.k1.sink.directory = /var/log/flumea1.sinks.k1.sink.serializer = text
2016-12-18 21:15:35
1631
原创 flume五：flume Processors介绍
目前flume支持default, failover or load_balance三种Processors。Failover Sink Processor：a1.sinkgroups = g1a1.sinkgroups.g1.sinks = k1 k2a1.sinkgroups.g1.processor.type = failovera1.sinkgroups.g1.
2016-12-18 21:14:55
397
原创 flume四：flume sink介绍
flume默认提供了以下sink：HDFS Sink：a1.channels = c1a1.sinks = k1a1.sinks.k1.type = hdfsa1.sinks.k1.channel = c1a1.sinks.k1.hdfs.path = /flume/events/%y-%m-%d/%H%M/%Sa1.sinks.k1.hdfs.filePref
2016-12-18 21:14:24
1273
原创 flume三：flume Channel selector介绍
flume默认提供以下Selectors：Replicating Channel Selectora1.sources = r1a1.channels = c1 c2 c3a1.sources.r1.selector.type = replicatinga1.sources.r1.channels = c1 c2 c3a1.sources.r1.selector.opt
2016-12-18 21:13:32
829
原创 flume二：flume Channel介绍
flume默认提供了以下channel：Memory Channel：a1.channels = c1a1.channels.c1.type = memorya1.channels.c1.capacity = 10000a1.channels.c1.transactionCapacity = 10000a1.channels.c1.byteCapacityBufferPer
2016-12-18 21:12:48
625
原创 redis二：配置文件个参数解析
参数说明redis.conf 配置项说明如下：1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程 daemonize no2. 当Redis以守护进程方式运行时，Redis默认会把pid写入/var/run/redis.pid文件，可以通过pidfile指定 pidfile /var/run/redis.p
2016-12-16 23:11:03
300
原创 redis一：安装以及常见操作
redis安装：1.tar -zxvf 文件名：解压文件2.cd redis_version:进入到redis目录3.make:编译redis4.cd src:进入到src目录下5.make install6. ./redis-server /home/lichangwu/redis-2.8.17/redis.conf:启动服务器7. ./redis-cli：启动客
2016-12-16 22:18:02
390
hadoop集群，hdfs dfs -ls / 目录出错
2016-11-24
TA创建的收藏夹 TA关注的收藏夹
TA关注的人