使用flume 运行avro-logger.conf文件时出现Address already in use

最新推荐文章于 2023-10-20 18:04:53 发布
最新推荐文章于 2023-10-20 18:04:53 发布
阅读量491 收藏
点赞数 1
文章标签： hadoop linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44077306/article/details/106538018
版权

在使用flume运行avro-logger.conf文件   bin/flume-ng agent --conf conf/ --conf-file conf/avro-logger.conf \ --name a1 -Dflume.root.logger=INFO,console 时出现问题，显示Address already in use

通过jps查看进程发现有一个应用占用了地址

通过kill了2775这个进程 再重新输入命令就成功启动啦

Flume练习(一)
HR的博客
01-06 757
Flume练习监控端口数据需求分析步骤实现监控单个文件，然后将数据传输到HDFS上需求实现步骤监控文件夹，将数据传输到HDFS需求实现步骤单数据源多出口案例(选择器)需求实现步骤单数据源多出口案例(Sink组)需求步骤实现多数据源汇总需求步骤实现 监控端口数据 需求分析 将数据发送到本机的44444端口，使用Flume监控本机的端口，将输入的数据跳过sink写道控制台 步骤实现 安装netcat工具 sudo yum install -y nc 判断44444端口是否被占用 sudo netst
二百零四、Flume——登录监听窗口报错Ncat: bind to :::44444: Address already in use. QUITTING.
最新发布
tiantang2renjian的博客
11-20 741
登录监听窗口报错Ncat: bind to :::44444: Address already in use. QUITTING.
flume使用中的一些常见错误解决办法 （地址已经使用）
张国荣家的弟弟
12-16 3958
原因：因为不断的启动flume ，而且flume没有关闭，还在后台。 kill -9 15199 2.必须要flume对应的版本，或者参数不能错 重启 flume-ng agent --conf conf/ --name a1 --conf-file job/flume-telnet-logger.conf -Dflume.root.logger=INFO,console ...
15 | 怎么老是出现“地址已经被使用”？
qq_37756660的博客
10-20 1010
今天我们分析了“Address already in use”产生的原因和解决方法。只要记住一句话，在所有 TCP 服务器程序中，调用 bind 之前请设置 SO_REUSEADDR 套接字选项。这不会产生危害，相反，它会帮助我们在很快时间内重启服务端程序，而这一点恰恰是很多场景所需要的。
Flum安装，以及地址被占用
weixin_43326083的博客
03-20 333
Flume安装前置条件 1.安装了JDK. 2.有足够的内存， 磁盘空间。 3. 操作的相应目录有读写权限 安装Flume 4. tar -zxvf flume-ng-1.6.0-cdh.tar.gz -C ~/app 5. 添加到系统环境变量 sudo vim /etc/profiles 使其生效 source /etc/profiles 6. 进入配置文件目录（cd conf）复制一个flum...
超级简单入门，日志管理系统Flume1.8.0的安装和配置和启动
专注编程和人工智能！
10-18 771
Flume简介 Flume原是Cloudera公司提供的一个高可用的、高可靠的、分布式海量日志采集、聚合和传输系统，而后纳入到了Apache旗下，作为一个顶级开源项目。Apache Flume不仅只限于日志数据的采集，由于Flume采集的数据源是可定制的，因此Flume还可用于传输大量事件数据，包括但不限于网络流量数据、社交媒体生成的数据、电子邮件消息以及几乎任何可能的数据源。 准备工作 Linux操作系统 flume8.0安装包（见文末或者官网下载） Flume运行机制 Flume的核心是把数据从数据
/usr/local/flume/bin/flume-ng agent -c . -f /usr/local/flume/conf/avro.conf -n a1 -Dflume.root.logger=INFO,console
06-12
- -f /usr/local/flume/conf/avro.conf：指定Flume的配置文件，这里使用的是avro.conf配置文件，它定义了Flume的数据流程和数据源 - -n a1：指定agent的名称为a1，用于在Flume中标识不同的组件 - -Dflume.root....
输入/usr/local/flume/bin/flume-ng agent -c . -f /usr/local/flume/conf/avro.conf -n a1 -Dflume.root.logger=INFO,console会有什么反应
06-11
这个命令会启动 Flume Agent，使用 /usr/local/flume/conf/avro.conf 配置文件中的配置，其中 -n 指定了 Agent 的名称为 a1，-Dflume.root.logger=INFO,console 用来设置日志级别和输出方式。启动后，Flume Agent 将...
$ flume-ng agent -c /usr/local/flume/conf -f /usr/local/flume/conf/avro.conf -n a1 -Dflume.root.logger=INFO,console
06-12
具体来说，它启动了一个名为 a1 的 agent，使用 /usr/local/flume/conf/avro.conf 文件中的配置，并将日志级别设置为 INFO，日志输出到控制台。该 agent 会从数据源采集数据，并将其传输到指定的目的地。
Flume集群环境搭建以及几种类型的conf配置文件
ForgetThatNight的博客
04-22 3276
1、Flume的安装非常简单，只需要解压即可，当然，前提是已有hadoop环境上传安装包到数据源所在节点上然后解压  tar -zxvfapache-flume-1.6.0-bin.tar.gz，然后进入flume的目录，修改conf下的flume-env.sh，在里面配置JAVA_HOME2、根据数据采集的需求配置采集方案，描述在配置文件中(文件名可任意自定义)3、指定采集方案配置文件，在相应的...
Flume的Source技术选型
ChengYanan的博客
05-04 480
项目技术背景 将data路径下所有日志文件通过Flume采集到HDFS上 五分钟一个目录，一分钟形成一个文件 技术选型 flume中有三种可监控文件或目录的source，分别为exec、spooldir、taildir exec：可通过tail -f命令去tail住一个文件，然后实时同步日志到sink，这种方式可能会丢数据 详情可见官网说明 官网截图 spooldir：可监听一个目...
Address already in use : connect 异常的解决办法
拼命工作，好好玩
03-07 2205
Java版C/S程序，作压力测试的时候发现当客户端连续创建连接一段时间后报   Address already in use : connect ...... 乱七八糟一堆异常   再尝试建立连接已经连不上了，通过 netstat -a 命令查看，有一大堆状态为 TIME_WAIT 的占用连接不被释放   网上查到很多这类问题解决办法   问题原因： Java的 Socket.c...
Address already in use解决办法
林夕i的博客
11-06 2万+
1.首先查看已经启动的端口 lsof -i tcp:7199 (这里的7199是端口号，选择你要查看的端口号) 2.这里会显示你查看的端口号的PID ，如图 使用命令 kill -9 1678 就能结束正在运行的端口了。 注：文章图片引自 https://blog.csdn.net/eider1998/article/details/109363565 ...
记flume部署过程中遇到的问题以及解决方法（持续更新）
热门推荐
小麒麟的成长之路
08-21 5万+
项目需求是将线上服务器生成的日志信息实时导入kafka，采用agent和collector分层传输，app的数据通过thrift传给agent，agent通过avro sink将数据发给collector，collector将数据汇集后，发送给kafka，拓扑结构如下：现将调试过程中遇到的问题以及解决方法记录如下：1、 [ERROR - org.apache.thrift.server.Abstr...
Flume1.4学习问题记录
cai5的专栏
05-07 1万+
1、red hat9 上安装 flume-1.4.0 ，配置好环境变量：
flume启动报错
dengmanzhou3124的博客
06-25 1384
执行flume-ng agent -c conf -f conf/load_balancer_server.conf -n a1 -Dflume.root.logger=DEBUG,console ，报错： org.apache.flume.FlumeException: Failed to set up server socket at org.apache.flume.sou...
Address already in use的解决方法
weixin_34005042的博客
02-16 5877
当客户端保持着与服务器端的连接，这时服务器端断开，再开启服务器时会出现： Address already in usr 可以用netstat -anp | more 可以看到客户端还保持着与服务器的连接(还在使用服务器bind的端口)。这是由于client没有执行close，连接还会等待client的FIN包一段时间。解决方法是使用setsockopt,使得socket可以被重用，是最常用的服务器...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值