一步步带你搭建Elasticsearch环境，还看不懂？

最新推荐文章于 2024-07-26 14:40:07 发布

2401_84413599

最新推荐文章于 2024-07-26 14:40:07 发布

阅读量795

点赞数 8

分类专栏：程序员文章标签： elasticsearch jenkins 大数据

本文链接：https://blog.csdn.net/2401_84413599/article/details/137986415

版权

程序员专栏收录该内容

94 篇文章 0 订阅

订阅专栏

本文介绍了Elasticsearch的多实例启动、插件管理，以及Kibana和Logstash的安装、配置和数据导入。同时提及了Java开发者的学习资源，包括全套学习资料和面试题解答，旨在帮助工程师提升技能和降低学习成本。

摘要由CSDN通过智能技术生成

查看已经安装插件：./elasticsearch-plugin list

安装插件：./elasticsearch-plugin install analysis-icu

查看已经安装的插件：./elasticsearch-plugin list

或者浏览器访问：
http://localhost:9200/_cat/plugins

1.1.4 Elasticsearch多实例启动

进入Elasticsearch的bin目录：

./elasticsearch -E node.name=node1 -E cluster.name=james -E path.data=mode1_data -d
./elasticsearch -E node.name=node2 -E cluster.name=james -E path.data=mode2_data -d
./elasticsearch -E node.name=node3 -E cluster.name=james -E path.data=mode3_data -d

在浏览器访问：
http://localhost:9200/_cat/nodes ，可以查看正在运行的节点信息：

1.2 Kibana安装

Kibana 是一个免费且开放的用户界面，能够让您对 Elasticsearch 数据进行可视化，并让您在 Elastic Stack 中进行导航。您可以进行各种操作，从跟踪查询负载，到理解请求如何流经您的整个应用，都能轻松完成。详情可查看：
https://www.elastic.co/cn/kibana/

1.2.1 Kibana安装

Kibana安装与启动方式与Elasticsearch基本相同：

下载地址：
https://www.elastic.co/cn/downloads/kibana

选择相应的版本进行下载，解压，进入bin目录，启动kibana

浏览器访问：http://localhost:5601/

1.2.2 Kibana插件安装

安装插件：bin/kibana-plugin install plugin_location

查看已装插件：bin/kibana-plugin list

移除插件：bin/kibana remove

1.3 Logstash安装

Logstash 是免费且开放的服务器端数据处理管道，能够从多个来源采集数据，转换数据，然后将数据发送到您最喜欢的“存储库”中。详情可查看：
https://www.elastic.co/cn/logstash/

1.3.1 Logstash安装

Logstash安装与启动方式与Elasticsearch基本相同：

下载地址：
https://www.elastic.co/cn/downloads/logstash

选择相应的版本进行下载，解压，进入bin目录，启动logstash

1.3.2 Logstash导入数据

下载最MovieLens最小测试数据集：
https://grouplens.org/datasets/movielens/

进入logstash安装目录的bin目录，添加logstash.conf文件：

path为movie.csv的路径。

input {
file {
path => “/Users/sgh/Develop/data/movies.csv”
start_position => “beginning”
sincedb_path => “null”
}
}
filter {
csv {
separator => “,”
columns => [“id”,“content”,“genre”]
}

mutate {
split => { “genre” => “|” }
remove_field => [“path”, “host”,“@timestamp”,“message”]
}

mutate {

split => [“content”, “(”]
add_field => { “title” => “%{[content][0]}”}
add_field => { “year” => “%{[content][1]}”}
}

mutate {
convert => {
“year” => “integer”
}
strip => [“title”]
remove_field => [“path”, “host”,“@timestamp”,“message”,“content”]
}

}
output {
elasticsearch {
hosts => “http://localhost:9200”
index => “movies”
document_id => “%{id}”
}
stdout {}
}

启动logstash：sudo logstash -f logstash.conf

在kibana界面可以看到movies数据集已经导入到了Elasticsearch中，完毕。