skywalking 监控页面不显示监控内容
一、遇到es存储磁盘空间满了
查看skywalking collector日志
cd /usr/local/skywalking/logs
tail -600f skywalking-oap-server.log
错误信息如下:
(SearchPhaseExecutionException: all shards failed)
重启es
su esroot
cd /usr/local/elk/elasticsearch/bin
ps -ef|grep elastic
kill -9 xxx
./elasticesearch -d
查看所有所有的状态
green:所有的主分片和副本分片都已分配。你的集群是 100% 可用的。
yellow:所有的主分片已经分片了,但至少还有一个副本是缺失的。不会有数据丢失,所以搜索结果依然是完整的。不过,你的高可用性在某种程度上被弱化。如果 更多的 分片消失,你就会丢数据了。把 yellow 想象成一个需要及时调查的警告。
red:至少一个主分片(以及它的全部副本)都在缺失中。这意味着你在缺少数据:搜索只能返回部分数据,而分配到这个分片上的写入请求会返回一个异常。
curl 'localhost:9200/_cat/indices?v'
删除red状态的索引
curl -XDELETE http://localhost:9200/index_name
重启skywalking collector
cd /usr/local/skywalking/bin
./oapService.sh
skywalking 启动会报index_not_found_exception
修改配置信息
cd elasticsearch-6.7.0/config/
vi elasticsearch.yml
action.auto_create_index
#此名称需要和collector配置文件一致。在skywalking配置中需要需要到
cluster.name: elasticsearch
# 数据存储目录
path.data: /data/esdata
# 日志存储目录
path.logs: /data/eslog
# 允许远程访问
network.host: 0.0.0.0
# 端口
http.port: 9200
# 赋予logstash创建索引的权限,
# 不加该行配置,skywalking 启动会报index_not_found_exception,错误
# 参考: https://ngx.hk/2016/11/08/logstash-outputs-elasticsearch-error-404-
# index_not_found_exception-%E7%9A%84%E8%A7%A3%E5%86%B3%E5%8A%9E%E6%B3%95.html
action.auto_create_index: .security,.monitoring*,.watches,.triggered_watches,.watcher-history*,filebeat*