![](https://img-blog.csdnimg.cn/20190918135101160.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
ELK
ELK日志
-KamMinG
搞好多好多码内.
展开
-
filebeat+kafka+ELK日志方案(Docker版)
一、架构图二、环境介绍kafka、ELk均用Docker运行:192.168.120.129在192.168.120.129部署filebeat采集日志三、部署方案步骤一、优化系统参数# vim /etc/sysctl.confvm.max_map_count=655360# sysctl -pvm.max_map_count = 655360步骤二、Docker搭建ELK参考上篇博客:Docker部署ELK及简单运行es端口:9204,kibana端口:5601此时查看容器情原创 2020-11-26 17:36:48 · 438 阅读 · 0 评论 -
Docker部署ELK及简单运行
测试环境:192.168.120.129一、搭建elasticsearch1、准备镜像,含elasticsearch-head插件# vim DockerfileFROM elasticsearch:2.3.5RUN /usr/share/elasticsearch/bin/plugin install mobz/elasticsearch-headEXPOSE 92002、创建镜像# docker build -t "es_test" .# docker imagesREPOSITOR原创 2020-11-19 17:56:17 · 422 阅读 · 0 评论 -
ElasticSearch其他插件安装
ElasticSearch —— 常用插件/工具汇总Elasticsearch6.x之Bigdesk插件安装转载 2020-06-19 17:58:40 · 113 阅读 · 0 评论 -
elasticsearch6.6.1安装head插件,亲测有效!
步骤一、安装依赖nodejs# mkdir /usr/local/nodejs# cd /usr/local/nodejs# wget https://npm.taobao.org/mirrors/node/latest-v8.x/node-v8.17.0-linux-x64.tar.gz# tar -xf node-v8.17.0-linux-x64.tar.gz# node -vv8.17.0# vim /etc/profileexport NODE_HOME=/usr/local/no原创 2020-06-19 17:45:44 · 308 阅读 · 0 评论 -
ElasticSearch监控集群状态查询方式
ES查看集群的状态实际上也是使用RESTful的接口,一般用的是GET方法http://[主机IP]:[ES端口]通常我们启动服务器之后,就可以通过这个简单的方式来验证服务器是否启动成功。从下面返加的JSON我们可以得到该节点的节点名,所属集群名,ES版本号,lucene版本号1、查看集群的健康状态http://ip:9200/_cat/health?vRL中_cat表示查看信息,health表明返回的信息为集群健康信息,?v表示返回的信息加上头信息,跟返回JSON信息加上?pretty同理原创 2020-06-19 14:30:14 · 3150 阅读 · 0 评论 -
Kafka管理工具实例应用
Kafka管理工具:kafka-manager步骤一、下载安装包使用sbt的方式重新编译实在太慢了,这里提供免费下载链接!!免费下载地址:链接:https://pan.baidu.com/s/1Epv8zJ6YCA36tj1E3uk1oA提取码:y4en步骤二、解压安装包# unzip kafka-manager-1.3.0.7.zip# cd kafka-manager-1.3.0.7/conf/步骤三、修改配置文件# vim application.confkafka-manag原创 2020-06-17 17:21:31 · 851 阅读 · 0 评论 -
Kafka常用命令的使用
Kafka常用命令# cd /opt/elk/kafka_2.11-1.1.0/bin 1、kafka服务启动:# ./kafka-server-start.sh ../config/server.properties2、查看有哪些主题:# ./kafka-topics.sh --list --zookeeper zk服务IP:21813、创建topic:# ./kafka-topics.sh --create --zookeeper zk服务IP:2181 --replicatio原创 2020-06-10 17:39:55 · 364 阅读 · 0 评论 -
ELK+kafka集群搭建
环境部署:es1-192.168.120.128-Elasticsearch5.6/zookeeper2.11-1.1.0/kafka_2.11-1.1.0es2-192.168.120.129-Elasticsearch5.6/zookeeper2.11-1.1.0/kafka_2.11-1.1.0es3-192.168.120.130-Elasticsearch5.6/zookeeper2.11-1.1.0/kafka_2.11-1.1.0logstash-192.168.120.131-Log原创 2020-05-19 11:48:23 · 508 阅读 · 0 评论 -
ELK简单实战---分析httpd的日志
本章介绍filter grok插件,分析httpd的日志grok插件:解析各种非结构化的日志数据插件grok使用正则表达式把飞结构化的数据结构化在分组匹配,正则表达式需要根据具体数据结构编写虽然编写困难,但适用性极广,几乎可以应用于各类数据分析httpd的日志# vim /etc/httpd/conf/httpd.conf //查看access_log的日志格式19...原创 2020-04-27 17:47:17 · 328 阅读 · 0 评论 -
认识Logstash插件
Logstash:Logstash是一个具有实时pipeline功能的开源数据收集引擎。Logstash可以动态的统一来自不同数据源的数据,并将数据规范化到你选择的目的地。虽然Logstash最初推动了日志收集方面的创新,但它的功能现在更丰富了。任何类型的事件都可以通过丰富的input,filter,output插件进行转换,简化抽取过程。环境概况系统类型:Centos7elasticse...原创 2020-04-27 17:33:19 · 436 阅读 · 0 评论 -
ELK简单部署
ELK简单部署环境概况系统类型:Centos7elasticsearch:10.211.55.9logstash:10.211.55.10kibana:10.211.55.11相关软件包链接:https://pan.baidu.com/s/1vFrsjONk-7ZPNb8sfOOAAA提取码:pcjt需关闭防火墙systemctl stop firewalldsetenforc...原创 2019-12-17 21:48:02 · 217 阅读 · 0 评论