问题现象
客户在初试用友云音时,部署完探针后,发现:启动agent后,并未在主机页签中注册主机信息,但是在jvm页签中却发现了几条上传的jvm指标数据。并且无法查询。
1、主机页签截图
2、JVM页签截图
问题分析
首先确定是否人为关闭导致,点击显示停用主机也无记录产生。说明并不是人为造成的。前台只能关闭停用主机,但无法通过前台删除注册的主机记录。
其次有jvm记录产生,说明jvm数据上传过。Jvm等相关数据都是通过agent 转发到云端,因此可以判断,agent到云端的网络是通的,即ping 域名 ,curl域名 应该都有返回值。
主机注册记录都存在cmdb_device 表中,上数据库中查看,并无此IP的数据写入。
select * from cmdb_device where ip = 'X.X.X.X';
远程排查 agnet\logs 下发现,sender.log 为空。并且在root.log中发现如下错误。
Due to java.io.IOException: Usable space exhausted, only 0 bytes remaining, required 524288000 bytes
Flume文件通道(file channel)报错,
文件通道是数据存储在磁盘中,错误原因,磁盘空间不足,具体来说,是一下两个配置目录空间不足
a1.channels.c2.checkpointDir = /mnt/flume/checkpoint
a1.channels.c2.dataDirs = /mnt/flume/data
- 查看了根盘的磁盘空间
解决方案
- 可以清理根盘的磁盘空间,留出2~3G的可用空间。
- 根盘是逻辑卷可以增加根盘的磁盘空间即可。
主机数据
JVM数据
行为操作数据
都已经上传关联成功。