傻瓜式 ELK 日志分析平台搭建,你学会了吗?

本文详细描述了如何在Linux环境中配置文件(如limits.conf),切换Elasticsearch和Kibana用户的启动方式,以及Logstash和Filebeat的安装配置过程。此外,还强调了Java开发者提升技能的重要性,提供了相关的学习资源和面试技巧准备。
摘要由CSDN通过智能技术生成

3.5 修改/etc/security/limits.conf

末尾添加:

  •           soft    nofile            65536
    
  •           hard    nofile            65536
    
  •           soft    nproc             4096
    
  •           hard    nproc             4096
    

image-20201127162946458

3.6 切换es 用户启动

su mtappelk

./bin/elasticsearch -d

image-20210310091040173

3.7 测试

判断是否启动成功:

curl -X GET “127.0.0.1:9200”

image-20210310091121764

或者浏览器访问:

http://192.168.1.123:9200/

4. kibana 安装配置


我们解压 Kibana 后,设置用户和 ES 的用户保持一致。

4.1 修改用户权限和访问权限

这里 logstash 也一起改了

chown -R mtappelk kibana-7.5.0-linux-x86_64

chown -R mtappelk logstash-7.5.0

image-20210310092400747

修改访问权限

chmod -R 777 kibana-7.5.0-linux-x86_64/

4.2 修改配置文件

路径:/kibana-7.5.0-linux-x86_64/config

image-20201127171949513

server.port: 5601

server.host: “0.0.0.0”

elasticsearch.hosts: [“http://192.168.168.21:9200”]

4.3 切换用户启动

su mtappelk

nohup sh./bin/kibana &

6、访问

http://192.168.1.123:5601/

image-20210310104324393

5. logstash 安装配置


5.1 新增 default.conf 配置

解压后,进入config 目录下创建default.conf 文件,内容如下:

Sample Logstash configuration for creating a simple

Beats -> Logstash -> Elasticsearch pipeline.

input {

beats {

port => 5044

}

}

output {

elasticsearch {

hosts => [“http://localhost:9200”]

index => “%{[@metadata][beat]}-%{[@metadata][version]}-%{+YYYY.MM.dd}”

#user => “elastic”

#password => “changeme”

}

}

5.2 启动 logstash

nohup sh bin/logstash -f config/default.conf &

启动成功如下:

image-20210310104031876

6. filebeat 安装配置


6.1 修改filebeat.yml

修改配置如下:

  • type: log

Change to true to enable this input configuration.

enabled: true

Paths that should be crawled and fetched. Glob based paths.

paths:

  • /usr/local/nginx/logs/*.log

#- c:\programdata\elasticsearch\logs*

  • type: log

enabled: true

paths:

  • /home/mtex_plat/logs/mtapp*/all.log

#-------------------------- Elasticsearch output ------------------------------

#output.elasticsearch:

Array of hosts to connect to.

hosts: [“localhost:9200”]

Optional protocol and basic auth credentials.

#protocol: “https”

#username: “elastic”

#password: “changeme”

#----------------------------- Logstash output --------------------------------

output.logstash:

The Logstash hosts

hosts: [“localhost:5044”]

Optional SSL. By default is off.

List of root certificates for HTTPS server verifications

#ssl.certificate_authorities: [“/etc/pki/root/ca.pem”]

Certificate for SSL client authentication

#ssl.certificate: “/etc/pki/client/cert.pem”

Client Certificate Key

#ssl.key: “/etc/pki/client/cert.key”

image-20210310141206908

配置将日志发送到 logstash

image-20210310141300115

6.2 启动 filebeat

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

如果你觉得这些内容对你有帮助,可以扫码获取!!(备注Java获取)

img

总结

我个人认为,如果你想靠着背面试题来获得心仪的offer,用癞蛤蟆想吃天鹅肉形容完全不过分。想必大家能感受到面试越来越难,想找到心仪的工作也是越来越难,高薪工作羡慕不来,却又对自己目前的薪资不太满意,工作几年甚至连一个应届生的薪资都比不上,终究是错付了,错付了自己没有去提升技术。

这些面试题分享给大家的目的,其实是希望大家通过大厂面试题分析自己的技术栈,给自己梳理一个更加明确的学习方向,当你准备好去面试大厂,你心里有底,大概知道面试官会问多广,多深,避免面试的时候一问三不知。

大家可以把Java基础,JVM,并发编程,MySQL,Redis,Spring,Spring cloud等等做一个知识总结以及延伸,再去进行操作,不然光记是学不会的,这里我也提供一些脑图分享给大家:

希望你看完这篇文章后,不要犹豫,抓紧学习,复习知识,准备在明年的金三银四拿到心仪的offer,加油,打工人!
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》点击传送门即可获取!
大概知道面试官会问多广,多深,避免面试的时候一问三不知。

大家可以把Java基础,JVM,并发编程,MySQL,Redis,Spring,Spring cloud等等做一个知识总结以及延伸,再去进行操作,不然光记是学不会的,这里我也提供一些脑图分享给大家:

[外链图片转存中…(img-bamjI1FQ-1712322276834)]

[外链图片转存中…(img-ELM0ZqNQ-1712322276835)]

[外链图片转存中…(img-M2VbCAQf-1712322276835)]

希望你看完这篇文章后,不要犹豫,抓紧学习,复习知识,准备在明年的金三银四拿到心仪的offer,加油,打工人!
《一线大厂Java面试题解析+核心总结学习笔记+最新讲解视频+实战项目源码》点击传送门即可获取!

  • 19
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值