ELK日志监控系统部署_elk日志中心可以协助研发人员进行系统问题排查,对系统进行监控和预警

最新推荐文章于 2024-11-10 02:54:45 发布

2401_84266249

最新推荐文章于 2024-11-10 02:54:45 发布

阅读量627

点赞数 24

分类专栏： 2024年程序员学习文章标签： elk jenkins 运维

本文链接：https://blog.csdn.net/2401_84266249/article/details/137850608

版权

2024年程序员学习专栏收录该内容

43 篇文章 0 订阅

订阅专栏

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新软件测试全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上软件测试知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip1024b （备注软件测试）

正文

)

Builder.loadFromStream(Settings.java:1080) at org.elasticsearch.common.settings.Settings

Builder.loadFromStream(Settings.java:1080)atorg.elasticsearch.common.settings.SettingsBuilder.loadFromPath(Settings.java:1067)
at org.elasticsearch.node.internal.InternalSettingsPreparer.prepareEnvironment(InternalSettingsPreparer.java:88)
at org.elasticsearch.common.cli.CliTool.(CliTool.java:107)
at org.elasticsearch.common.cli.CliTool.(CliTool.java:100)
at org.elasticsearch.bootstrap.BootstrapCLIParser.(BootstrapCLIParser.java:48)
at org.elasticsearch.bootstrap.Bootstrap.init(Bootstrap.java:242)
at org.elasticsearch.bootstrap.Elasticsearch.main(Elasticsearch.java:35)
解决办法
配置文件中所添加部分冒号后加一个空格

2.[root@bogon elasticsearch]# ./bin/elasticsearch
Exception in thread “main” java.lang.RuntimeException: don’t run elasticsearch as root.
at org.elasticsearch.bootstrap.Bootstrap.initializeNatives(Bootstrap.java:94)
at org.elasticsearch.bootstrap.Bootstrap.setup(Bootstrap.java:160)
at org.elasticsearch.bootstrap.Bootstrap.init(Bootstrap.java:286)
at org.elasticsearch.bootstrap.Elasticsearch.main(Elasticsearch.java:35)
Refer to the log for complete error details.
不能使用root用户启动
vim elasticsearch
在变量ES_JAVA_OPTS使用前添加以下命令:
ES_JAVA_OPTS=“-Des.insecure.allow.root=true”

./bin/elasticsearch
后台运行
./bin/elasticsearch -d

如需要添加登陆认证功能

bin/plugin install license （安装license）
bin/plugin install shield （安装shield)
bin/elasticsearch (重启elastic）
bin/shield/esusers useradd es_admin -r admin

查看ES是否安装成功
浏览器 IP:9200 显示一下内容
{
“name” : “node0”,
“cluster_name” : “es_cluster”,
“cluster_uuid” : “0lYt6FFsTsCQj-4f3CZAXQ”,
“version” : {
“number” : “2.4.1”,
“build_hash” : “c67dc32e24162035d18d6fe1e952c4cbcbe79d16”,
“build_timestamp” : “2016-09-27T18:57:55Z”,
“build_snapshot” : false,
“lucene_version” : “5.5.2”
},
“tagline” : “You Know, for Search”
}

查看集群状态IP::9200/_plugin/head/

安装logstash-2.4.0.tar.gz
tar -xvf logstash-2.4.0.tar.gz -C /home/test/elk
mv /home/test/elk/logstash-2.4.0 /home/test/elk/logstash
cd /home/test/elk/logstash
mkdir config
创建配置文件
vim config/log_to_es.conf
内容模板：

input {
file {
type => “errorlog”
path => “/home/task/messages”
start_position => beginning
codec => multiline { #合并多行
pattern => “%{TIMESTAMP_ISO8601}”
negate => true
what => “previous”
}
}
}

filter {
if [type] == “CRM”{
grok{
match => { “message” =>“%{TIMESTAMP_ISO8601:timestamp} %{LOGLEVEL:level} %{JAVALOGMESSAGE:msg}” }
}
}
}

output {

elasticsearch {
action => “index” #The operation on ES
hosts => “192.168.1.223:9200” #ElasticSearch host, can be array.
index => “tomcatlog_%{+YYYY.MM.dd}” #The index to write data to.

}
}
启动logstash
./logstash/bin/logstash -f config/log_to_es.conf

安装kibana
tar -xvf kibana-4.6.1-linux-x86_64.tar.gz -C /home/test/elk
mv /home/test/elk/kibana-4.6.1-linux-x86_64 /home/test/elk/kibana
cd kibana/
vim conf/kibana.yml
添加一下内容（或者取消注释）
server.port: 5601
server.host: “192.168.1."
elasticsearch.url: "http://192.168.1.:9200”
elasticsearch.username: “"
elasticsearch.password: "”
kibana.index: “.kibana”
启动kibana
./bin/kibana
浏览器打开 IP:5601

遇到问题
浏览器打开kibana显示：
unable to fetch mapping do you have indices matching the pattern
错误原因：
kibana没有检测到索引
解决办法：
logstash配置文件里面的指定的索引名字index与elasticsearch创建的索引名和kibana检测的索引名必须相同

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注软件测试）