ELK之Elasticsearch学习—es(elasticsearche的简写)安装

最新推荐文章于 2023-12-13 09:32:48 发布
最新推荐文章于 2023-12-13 09:32:48 发布
阅读量802 收藏
点赞数
分类专栏： ELK 文章标签： ELK elasticsearch elasticsearch安装
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yts1115084429/article/details/101366299
版权

安装jdk

jdk网盘提取地址：https://pan.baidu.com/s/1-PYah5kwSmcJ9NnTt2_yNQ
# rz  
# tar xf jdk-8u101-linux-x64.tar.gz -C /opt/app/
# ln -s /opt/app/jdk1.8.0_101/ /opt/app/jdk
# vim /etc/profile
JAVA_HOME=/opt/app/jdk
JRE_HOME=/opt/app/jdk/jre
PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar:$JRE_HOME/lib
export JAVA_HOME JRE_HOME PATH CLASSPATH
# source /etc/profile
# java -version
java version "1.8.0_101"
  • 怎么找到es(elasticsearch的简写)版本对应的jdl版本？
    打开https://www.elastic.co/guide/en/elasticsearch/reference/6.2/index.html ——>输入你的es版本——>点击 Set up Elasticsearch ——>找到Java version的一段信息就知道当前es需要啥版本的jdk了。

安装es

下载软件

# cd /opt/src/
# rz  
用户可以选择去官网下载或者百度网盘下载
百度网提取地址：https://pan.baidu.com/s/1LaQSVxnr4Sv9GZGi2NNP_A
elasticsearch-5.5.2.zip			#我这篇文档是用的这个版本(版本过高的话,得去官网重新查找安装方法)

安装依赖

# yum install zip unzip -y			#需要用到unzip解压

创建对应的目录

mkdir /opt/app /data/es /data/logs/es /data/es_backup -p
/opt/app/	#存放es主程序   /data/es #存放es数据  /data/logs/es	#存放es日志  /data/es_backup  #存放快照

创建es用户

# groupadd -g 550 es && useradd -u 550 -g 550 -s /sbin/nologin es	#默认不支持root用户运行es,建议新建个用户去运行es

安装es

# unzip elasticsearch-5.5.2.zip 		
# mv elasticsearch-5.5.2/ /opt/app/				#因为是个二进制文件,解压之后直接移到主程序目录下即可
# ln -s /opt/app/elasticsearch-5.5.2/  /opt/app/es		  #可以做软链接,也可以直接用原名,客官你随意

授权

# $ chown es.es -R /opt/app/es /data/logs/es/ /data/es/ /data/es_backup/

编辑配置文件

# cp /opt/app/es/config/elasticsearch.yml{,.bak}	#建议先备份一份原件
# vim /opt/app/es/config/elasticsearch.yml		
## 常用配置			
cluster.name: es_cluster							#自定义集群名字(es默认是以集群方式启动)
node.name: es_node									#自定义节点名称
path.data: /data/es/		#索引数据的存放位置(默认是在/data目录下,多个目录用' , '号隔开,/data/es/,/es1/)
path.logs: /data/logs/es/							#日志存放路径
http.port: 9200										#设置es对外服务的http端口

#主要是解决es与head插件连通的问题
http.cors.enabled: true							
http.cors.allow-origin: "*"			#*的话是所有节点

##其他配置	
#network.host:	192.168.1.18 						#默认是127.0.0.1,对外的话需要绑定当前节点的ip地址
#discovery.zen.ping.unicast.hosts: [ip]				#设置集群中master节点的初始列表，可以通过这些节点来自动发现新加入集群的节点。
#gateway.recover_after_nodes: 2						#设置集群中N个节点启动时,进行数据恢复,默认是1
#discovery.zen.minimum_master_nodes: 2				#设置当前集群中有几个集群可以成为master,大集群可以设置为2-4个,默认是1个
#discovery.zen.ping.timeout: 30s					#设置集群自动发现其它节点的ping连接超时时间,默认是3s，网络有延迟的尽量大些	
#discovery.zen.ping.multicast.enabled: false		#是否打开多播发现节点,默认是true
#client.transport.ping_timeout: 30s					#ping一个节点的响应时间 默认5秒
#cluster.routing.allocation.node_initial_primaries_recoveries: 6	#初始化进程时,并发恢复的线程个数,默认是4个
#cluster.routing.allocation.node_concurrent_recoveries: 5			#添加/删除节点或负载均衡时并发恢复线程的个数,默认是4个
#indices.recovery.max_bytes_per_sec: 50mb			#设置数据恢复时限制的带宽,如50mb,0为无限制
#indices.recovery.concurrent_streams: 5				#设置这个参数可以限制其他分片恢复数据时最大打开流的个数,默认是5
#transport.tcp.compress: true						#是否压缩tcp传输时数据,默认是flase,不压缩
#index.number_of_shards: 5							#设置默认索引分片个数,默认5篇
#index.number_of_replicas: 1						#设置默认索引副本个数,默认是1个
#node.data: true									#该节点是否存储索引数据,默认是ture

# vim /etc/default/es			#定义一些es的环境变量(供es.service文件中EnvironmentFile参数读取)
ES_USER="es"
ES_GROUP="es"
JAVA_HOME="/opt/app/jdk"						#设置jdk路径
LOG_DIR="/data/logs/es"							#设置log路径
MAX_OPEN_FILES=655350							#最大打开文件描述符
MAX_MAP_COUNT=262144							#设置虚拟内存值
CONF_DIR="/opt/app/es/config"					#配置文件路径
DATA_DIR="/data/es"								#索引数据存放路径

生成systemctl启动脚本

# vim /etc/systemd/system/es.service
[Unit]
Description=elasticsearch5			#描述

[Service]
Type=simple			#定义访问daemon启动方式，有simple(默认值,有Execstart指令启动,启动后常驻内存中),forking(需要产生很多子进程用fork),oneshot(跟simple类似,但是当工作完成后,就直接退出了),dbus,idle,前3种用的较多
User=es
Group=es
EnvironmentFile=-/etc/default/es			#EnvironmentFile 指定是从文本文件中读取变量 EnvironmentFile=-+目录(减号一定不要忘记哦)
ExecStart=/opt/app/es/bin/elasticsearch -Epath.conf=/opt/app/es/config	#指定服务启动运行的命令
ExecStop=/bin/kill -s QUIT $MAINPID			#指定服务关闭运行的命令  $MAINPID是通过simple获取值
PrivateTmp=false																											#
Restart=always		#有7个值,常用的on(默认) 退出后不会重启,always不管啥原因退出都重启,on-success,on-failure,on-abnormal,on-abort,on-watchdog。
LimitNOFILE=655350

[Install]			 #定义由systemctl enable或systemctl disable命令再实现服务是否能够开机启用或禁用的选项
WantedBy=multi-user.target					#此参数是代表在命令模式下启动,还有个参数是图形界面下启动的

# systemctl daemon-reload
# systemctl restart es
# ss -nalpt | grep 9200
LISTEN     0      128       ::ffff:127.0.0.1:9200                    :::*                   users:(("java",pid=1512,fd=118))
LISTEN     0      128        ::1:9200                    :::*                   users:(("java",pid=1512,fd=116))

报错1
原因:虚拟内存给的太低
max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
解决:修改虚拟内存
# more /proc/sys/vm/max_map_count
65530
# vim /etc/sysctl.conf
vm.max_map_count=262144
# sysctl -p
vm.max_map_count = 262144

报错2
原因：内存至少要2G
max number of threads [1786] for user [es] is too low, increase to at least [2048]
解决：把内存给2G

安装head插件

  • head插件是 es的可视化插件，简单来说通过此插件一个能以一个更清晰的界面去操作es。
    注:在head插件官方说,head是已经作为一个独立的服务运行了

      # vim /opt/app/es/config/elasticsearch.yml				#在es的主配置文件添加这2行信息,使es支持head插件
  http.cors.enabled: true
  http.cors.allow-origin: "*"

  # git clone git://github.com/mobz/elasticsearch-head.git
  # cd elasticsearch-head/
  # yum install npm -y		#NPM是随同NodeJS一起安装的包管理工具，能解决NodeJS代码部署上的很多问题(类似于yum)
  # yum install bzip2 libXext libXrender fontconfig libfontconfig.so.1  -y
  # npm install
  # npm run start
向上攀登的菜鸡
关注
专栏目录
【ELK01】ELK简介以及ElasticSearch安装、ES客户端工具-Head安装、报错问题整理
Alex的博客
11-16 1007
ELK 是elastic公司提供的一套完整的日志收集以及展示的解决方案，是三个产品的首字母缩写，分别是ElasticSearch、Logstash 和 Kibana。head插件是一个可以帮助用户代理访问es的,可以图形界面展示数据的插件.我们配置了es的跨域开启,所以为了方便观察,我们可以安装head插件。
docker安装elk（Elasticsearch+logstash+kibana） 亲测可以使用
qq_44605317的博客
07-02 3525
一、elk是什么 ELK 是一套完整的日志收集以及展示的解决方案，是三个产品的首字母缩写，分别是ElasticSearch、Logstash 和 Kibana。 ElasticSearch： 简称ES，它是一个实时的分布式搜索和分析引擎，它可以用于全文搜索，结构化搜索以及分析 Lucene 基础上的搜索引擎，使用 Java 语言编写。 Logstash：是一个具有实时传输能力的数据收集引擎，用来进行数据收集 然后发送给 es Kibana：为 Elasticsearch 提供了分析和可视化的 Web 平台
elk部署+es二进制部署
weixin_51711897的博客
08-30 173
从图中所示，filebeat结构：由两个组件构成，分别是inputs（输入）和harvesters（收集器），这些组件一起工作来跟踪文件并将事件数据发送到您指定的输出，harvester负责读取单个文件的内容。每个收集器都读取单个日志以获取新内容，并将新日志数据发送到libbeat，libbeat将聚集事件，并将聚集的数据发送到为Filebeat配置的输出。Filebeat监视您指定的日志文件或位置，收集日志事件，并将它们转发到Elasticsearch或 Logstash进行索引。
ELK中的“E”和“K”安装
ZhouGuo520的博客
07-14 597
1、安装elasticsearch 安装jdk并设置环境变量（略） rpm -ivh elasticsearch-6.6.0.rpm 编辑 /etc/sysconfig/elasticsearch 添加JAVA_HOME路径 编辑/etc/elasticsearch/elasticsearch.yml cluster.name: my-app node.name: node-1 path.data: /opt/eLAroot/data #可更改数据目录 path.logs: /op
elk安装篇之 ES安装
huangchong0107的博客
05-20 331
1.Elasticsearch 安装 安装前，查看环境jdk 和elk 相关版本的对应关系： ELK版本和 jdk版本对应：版本关系对比链接 1.下载Elasticsearch 对应的安装包 https://www.elastic.co/cn/downloads/past-releases#elasticsearch 2.下载后，上传到linux服务器对应的目录位置 ，解压 如我本地放在 ：/usr/local/elk/elasticsearch cd /usr/local/elk/elasticsear
让你见识见识什么是ELK（E)
ProGram_BlackCat的博客
12-01 1414
昨天博客没有写，原因真得不想提，可能是我下载得ftp客户端有注入木马，导致登陆ftp服务器得账号和密码被搞，数据库恶意被黑，今天服务器也很慢，可能是被攻击了，带宽被占吧。下次真的注意，不去垃圾网址下载软件了，言归正传，写写ELK这三兄弟吧，我准备分开单独得去写他们，下面开始。要认识一个新物种首先得要知道他是什么？干什么？有什么用？一、ELK详解Elasticsearch是个开源分布式搜索引擎，它的特
Elasticsearch
asddasddeedd的博客
12-03 410
什么是elasticsearch elasticsearch简写es，es是一个高扩展、开源的全文检索和分析引擎，它可以准实时地快速存储、搜索、分析海量的数据。比如：一个线上商城系统，用户需要搜索商城上的商品。在这里你可以用es存储所有的商品信息和库存信息，用户只需要输入”空调”就可以搜索到他需要搜索到的商品 Docker搭建ES集群 1、关闭防火墙 # 关闭防火墙 systemctl stop firewalld.service # 禁用防火墙 systemctl ..
ELK学习之安装elasticsearch
liyingying111111的专栏
08-07 283
安装教程：https://blog.csdn.net/u012270682/article/details/72934270.亲测已经通过。访问http://localhost:9100端口入下图所示: 用IE浏览器打开。google浏览器打开我的版本页面兼容性不好 官网下载: elasticsearch node下载地址:https://nodejs.org/en/download/ ...
ELK学习（一）ElasticSearch安装
Cx的博客
05-23 516
针对elk的全面学习与探索，细节到具体使用过程中的每一个配置项的意思解释，和自己项目中遇到的一些问题解决方案。 共勉。
2.ELK之Elasticsearch常用DSL语句(kibana语句)
热门推荐
mijichui2153的博客
06-23 2万+
Filter DSL term 过滤 term主要用于精确匹配哪些值，比如数字，日期，布尔值或 not_analyzed 的字符串(未经分析的文本数据类型)： { “term”: { “age”: 26 }} { “term”: { “date”: “2014-09-01” }} { “term”: { “public”: true }} { “term”: { “tag”: “full_text” }} 完整的例子， hostname 字段完全匹配成 xxx 的数据： { "query"
ELK日志平台（elasticsearch+logstash+kibana）搭建
最新发布
用来当笔记本
12-13 2197
为了实现分布式日志数据统一收集,实现集中式查询和管理 故障排查 安全信息和事件管理本文仅仅简单介绍了ELK的安装，而ELK其他强大的功能需要继续学习。
ElasticSearch基础安装（一）
liupengwxl的博客
10-28 377
目录 1.1ElasticSearch 1.2ElasticSearch的基本概念 1.3Elasticsearch的架构 1.4RESTfull API 1.5CRUL命令 1.6CentOS7下安装ElasticSearch6.2.4 1.7安装Head插件 1.8安装Kibana 1.9安装中文分词器 1.1ElasticSearch 是一个基于Luc...
ELK生态圈（es、logstash、kibana）的介绍和安装部署
PAyy_413的博客
09-22 1145
​ELK生态圈的三大组件介绍和安装部署！
【网络摘抄】开源日志解决方案ELK
the_fool_的博客
10-16 332
--原文地址 ELK简介： ELK是三个开源软件的缩写，分别表示：Elasticsearch , Logstash, Kibana , 它们都是开源软件。新增了一个FileBeat，它是一个轻量级的日志收集处理工具(Agent)，Filebeat占用资源少，适合于在各个服务器上搜集日志后传输给Logstash，官方也推荐此工具。 Elasticsearch 是个开源分布式搜索引擎，提供搜集、分析、存储数据三大功能。它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，
ELK理论总结和ES群集的搭建
Mr.李的博客
05-21 909
文章目录ELK的概述什么是ELK？ELK的工作架构展示图ES核心概念cluster：群集Node：节点Index：索引shard: 分片replcas：副本Logstash工作过程Logstash和filebeat的区别Kibanna监测数据ES群集的部署安装elasticsearch修改配置文件创建数据目录，并修改权限分配锁定内存配置群集其他节点浏览器安装es-head插件扩展常见群集管理监控命令 ELK的概述 什么是ELK？ ELK是Elasticsearch、Logstash、Kibana三大开源框架
elasticserach
qq_29082261的博客
07-05 157
1、下载地址：https://www.elastic.co/cn/downloads/elasticsearch 2、下载完成后上传到目标服务器 // An highlighted block tar -zxvf elasticsearch-7.8.0-linux-x86_64.tar.gz mv elasticsearch-7.8.0 /usr/local cd elasticsearch-7.8.0/config vim elasticsearch.yml 修改elasticsearch.yml //修
ELK学习笔记01-ElasticSearch安装
doublewe的博客
08-05 208
ElasticSearch 1.安装前提 环境：CentOS 7 官网下载好ElasticSearch安装包，地址：https://www.elastic.co/cn/downloads/elasticsearch 由于下载的是7.x版本的ElasticSearch安装包，该版本自带了JDK11的环境，且必须为JDK11，与其他环境不兼容，所以不需要再配置java环境 2.解压安装包 可以使用xftp连接虚拟机将下载好的安装包放到/home文件夹下 解压 进入解压后的文件夹可以看到如下目录结构
【Elasticsearch 学习笔记 ES安装及使用】
yang13676084606的博客
11-04 1417
Elasticsearch 是一个分布式、高扩展、高实时的搜索与数据分析引擎。它能很方便的使大量数据具有搜索、分析和探索的能力。原理：先将数据提交到Elasticsearch数据库中，再通过分词控制器去将对应的语句分词，将其权重和分词结果一并存入数据，当用户搜索数据的时候，再根据权重将结果排名，打分，再将返回结果呈现给用户。下载链接Windows启动注意的地方，如果用的是8.5版本。会遇到启动成功，打开会访问失败。这个是因为ssl认证打开了，在配置文件里关闭就好了。
Elasticsearch学习（十）ELK安装及使用
码易的博客
10-21 415
目录前言一、Logstash安装二、测试1、全量数据测试2、增量数据测试2.读入数据总结 前言 ELK是三个开源软件的缩写，分别是：Elasticsearch , Logstash, Kibana。 Logstash 主要是用来日志的搜集、分析、过滤日志的工具； Kibana可以为 Logstash 和 ElasticSearch 提供Web 界面，便于查询、分析数据。 一、Logstash安装 Elasticsearch , Kibana已经安装过，参见博客 原创 Elasticsearch学习..
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值