阿里云Docker安装ES\ES_Head\安装部署logstash导mysql数据入ElasticSearch

一、安装ES

1、第一步:拉取镜像:

sudo docker pull elasticsearch:7.6.1

安装版本根据自身情况安装即可

2、第二步:创建docker容器挂在的目录:

sudo mkdir -p /opt/elasticsearch/config
sudo mkdir -p /opt/elasticsearch/data
sudo mkdir -p /opt/elasticsearch/plugins

配置一下yml文件:

echo "http.host: 0.0.0.0" >> /opt/elasticsearch/config/elasticsearch.yml

3、第三步文件授权

chmod -R 777 /opt/elasticsearch/

4、启动

docker run --name elasticsearch -p 9200:9200  -p 9300:9300 
-e "discovery.type=single-node" 
-e ES_JAVA_OPTS="-Xms84m -Xmx512m" 
-v /opt/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml 
-v /opt/elasticsearch/data:/usr/share/elasticsearch/data 
-v /opt/elasticsearch/plugins:/usr/share/elasticsearch/plugins -d elasticsearch:7.6.1

说明:

-p 端口映射
-e discovery.type=single-node 单点模式启动
-e ES_JAVA_OPTS=“-Xms84m -Xmx512m”:设置启动占用的内存范围
-v 目录挂载
-d 后台运行

5、相关状态命令

docker ps  查看正在运行的容器
docker ps  -a 显示所有的容器,包括未运行的
docker logs elasticsearch  启动日志查询
docker restart elasticsearch   重启
docker exec -it elasticsearch bash 进入
docker stop 容器名称    停止容器
docker rm 容器id  删除容器

删除的案例:
在这里插入图片描述

6、成功

在这里插入图片描述

二、安装ES_Head

1、拉取镜像

docker pull mobz/elasticsearch-head:5

2、启动

docker run -d --name es-head -p 9100:9100 docker.io/mobz/elasticsearch-head:5

3、添加跨域配置

在confiig下的elasticsearch.yml中

http.cors.enabled: true
http.cors.allow-origin: “*”

4、重启es容器

 docker restart elasticsearch

5、访问

在这里插入图片描述

6、遇到的bug:关于ElasticSearch-Head中查询不出数据的解决方法

进去docker镜像的命令:
1、

注意:docker exec -it ID /bin/bash中的ID为docker ps -a中的ID 而非docker image中的ID

在这里插入图片描述

7、解决Docker容器下不能使用vim命令的问题

在这里插入图片描述

三、安装Logstash

1、拉取镜像

docker pull logstash:7.6.1

2、启动

docker run -d --name=logstash logstash:7.5.1

查看日志:

docker logs -f logstash

授予权限:

chmod 777 -R /data/elk7/logstash

相关博客资料:
Docker安装部署logstash导mysql数据入ES
Logstash 安装笔记(出现-bash: logstash: 未找到命令可看)
docker安装logstash

四、其他博文

ElasticSearch入门学习笔记(一)概念篇
ElasticSearch入门学习笔记(二)软件安装篇
ElasticSearch入门学习笔记(三)SpringBoot整合篇
SpringBoot集成BBOSS-ElasticSearch实现ElasticSearch客户端

在这里插入图片描述

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
### 回答1: Logstash可以将处理过的数据输出到Elasticsearch中,实现数据的存储和检索。具体的步骤如下: 1. 在Logstash的配置文件中,添加Elasticsearch的输出插件,指定Elasticsearch的地址和索引名称等参数。 2. 启动Logstash,它会读取指定的数据源,对数据进行处理,并将处理后的数据输出到Elasticsearch中。 3. 在Elasticsearch中,可以使用Kibana等工具进行数据的可视化和检索。 总的来说,LogstashElasticsearch是一对非常强大的组合,可以帮助我们快速构建数据处理和检索系统。 ### 回答2: Logstash是一个用于数据收集、处理和转换的工具,可以从不同的源获取数据并将其输出到各种目标存储。而Elasticsearch则是一个开源的分布式搜索引擎,它能够在高效、安全、可伸缩的基础上索引与搜索海量实时数据Logstash输出到Elasticsearch,是一种常见的数据处理和存储的方案,也是Elastic Stack(ELK)的一部分。这种方案可以结合多个数据源和数据格式,并通过logstash进行数据转换和处理,最终将收集的数据存储到Elasticsearch中,同时在Kibana中进行数据展示和分析。 为了实现这种方案,需要在Logstash中配置Elasticsearch插件,通过设置输出插件的类型和参数来指定Elasticsearch作为输出目标。在数据从不同源收集后,Logstash会将其进行过滤和转换处理,然后将处理后的数据输出到Elasticsearch中。 当数据存储到Elasticsearch中后,可以使用Kibana进行数据展示和分析。通过Kibana的图表和仪表盘 ,我们可以对数据进行实时监控,进行查询分析和可视化。同时,Elasticsearch还具有高效、可伸缩的实时搜索和分布式存储特性,可以支持海量数据的存储和查询。 总的来说,Logstash输出到Elasticsearch是一个实现实时数据收集和分析的强大工具和技术,可以帮助我们更好的理解数据,以便做出更好的决策和优化业务。 ### 回答3: Logstash是一种开源数据收集引擎,可以将不同来源的数据进行过滤、转换和聚合,最终输出到不同目的地。其中,输出到Elasticsearch是最常见的用例之一。 首先,我们需要安装和配置LogstashElasticsearchLogstash的配置文件中需要指定输出插件为Elasticsearch,并配置Elasticsearch的IP地址和端口等参数。例如: ``` output { elasticsearch { hosts => ["127.0.0.1:9200"] index => "myindex-%{+YYYY.MM.dd}" } } ``` 上面的配置表示将数据输出到本地的Elasticsearch实例,并将索引的名称设为“myindex-年月日”的格式,可以实现按天切分索引,方便后续的查询和维护。 在Logstash中,我们可以使用不同的插件对数据进行处理和转换,以满足不同的需求。比如,使用grok插件将日志中的格式化信息提取出来,使用date插件解析时间戳等等。这些插件都可以在Logstash的插件库中找到,也可以自己编写插件满足特定的需求。 在输出到Elasticsearch时,Logstash会将数据转化为JSON格式,并根据指定的索引名称和类型进行索引。Elasticsearch提供了强大的搜索和聚合功能,可以对数据进行复杂的查询和分析。同时,Elasticsearch也支持分布式架构,可以横向扩展以处理海量数据和高并发量。 总之,Logstash输出到Elasticsearch是一种非常方便和实用的数据处理和分析方案,实现了数据的集中化和可视化,可以帮助我们更好地理解和利用数据
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

java亮小白1997

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值