Elasticsearch入门

最新推荐文章于 2022-03-30 21:20:43 发布
最新推荐文章于 2022-03-30 21:20:43 发布
阅读量237 收藏 1
点赞数
文章标签： elasticsearch
  • 使用root用户创建一个专门的用户es，并创建文件夹
 useradd es 
    mkdir -p /export/servers/es
    mkdir -p /export/data/es
    mkdir -p /export/logs/es
    chown -R es /export/servers/es
    chown -R es /export/data/es
    chown -R es /export/logs/es
    passwd es
  • 添加权限
visudo

在这里插入图片描述
三台虚拟机做同样的操作，操作完毕断开连接，使用es用户重新创建连接

  • 下载安装包
su es
cd ~
wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.0.0.tar.gz
tar -zxvf elasticsearch-6.0.0.tar.gz -C /export/servers/es/
  • 修改配置文件
cd /export/servers/es/elasticsearch-6.0.0/config
rm elasticsearch.yml
vi elasticsearch.yml

# 集群名字
cluster.name: myes
# # 集群中当前的节点
node.name: node01
# # 数据目录
path.data: /export/data/es
# # 日志目录
path.logs: /export/logs/es
# # 当前主机的ip地址
network.host: 192.168.72.100
http.port: 9200
# # 集群上的节点信息
discovery.zen.ping.unicast.hosts: ["node01","node02","node03"]
# # linux安装es的一个bug解决的配置
bootstrap.system_call_filter: false
bootstrap.memory_lock: false
# # 是否支持跨域
http.cors.enabled: true
# # *表示支持所有域名
http.cors.allow-origin: "*"
  • 将安装包分发至其他服务器
cd /export/servers/es
scp -r elasticsearch-6.0.0/ node02:$PWD
scp -r elasticsearch-6.0.0/ node02:$PWD
  • 修改另外两台服务器的配置文件
cd /export/servers/es/elasticsearch-6.0.0/config
vim elasticsearch.yml

cluster.name: myes
node.name: node02 
path.data: /export/data/es
path.logs: /export/logs/es
network.host: 192.168.72.110
http.port: 9200
discovery.zen.ping.unicast.hosts: ["node01","node02","node03"]
bootstrap.system_call_filter: false
bootstrap.memory_lock: false
# 是否支持跨域
http.cors.enabled: true
# *表示支持所有域名
http.cors.allow-origin: "*"

cluster.name: myes
node.name: node03
path.data: /export/data/es
path.logs: /export/logs/es
network.host: 192.168.52.120
http.port: 9200
discovery.zen.ping.unicast.hosts: ["node01","node02","node03"]
bootstrap.system_call_filter: false
bootstrap.memory_lock: false
# 是否支持跨域
http.cors.enabled: true
# *表示支持所有域名
http.cors.allow-origin: "*"

更多配置在：https://blog.csdn.net/an74520/article/details/8219814

  • 修改三台服务器的内存大小
cd /export/servers/es/elasticsearch-6.0.0/config
vi jvm.options 

-Xms2g
-Xmx2g

在这里插入图片描述
elasticsearch这个服务比较耗内存

  • 三个重要配置：

问题一：max file descriptors [4096] for elasticsearch process likely too low, increase to at least [65536]
ES因为需要大量的创建索引文件，需要大量的打开系统的文件，所以我们需要解除linux系统当中打开文件最大数目的限制，不然ES启动就会抛错

sudo vi /etc/security/limits.conf

添加下边内容，连同“ * ”

* soft nofile 65536
* hard nofile 131072
* soft nproc 2048
* hard nproc 4096

问题二：max number of threads [1024] for user [es] likely too low, increase to at least [4096]
修改普通用户可以创建的最大线程数
max number of threads [1024] for user [es] likely too low, increase to at least [4096]
原因：无法创建本地线程问题,用户最大可创建线程数太小
解决方案：修改90-nproc.conf 配置文件。

sudo vi /etc/security/limits.d/90-nproc.conf

找到如下内容：

* soft nproc 1024

#修改为

* soft nproc 4096

问题三：max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]
调大系统的虚拟内存
max virtual memory areas vm.max_map_count [65530] likely too low, increase to at least [262144]
原因：最大虚拟内存太小
每次启动机器都手动执行下。

sudo  sysctl -w vm.max_map_count=262144

以上三个问题的操作完成后需要重新连接才生效

  • 启动es服务
调大系统的虚拟内存：
sudo  sysctl -w vm.max_map_count=262144
启动：
nohup /export/servers/es/elasticsearch-6.0.0/bin/elasticsearch >/dev/null 2>&1 &
  • 访问es
http://node01:9200/?pretty

启动后只能看见一个简单的页面
在这里插入图片描述
想要有一个好看的界面，所以安装一个插件elasticsearch-head，这个插件安装需要node.js的环境

安装Node.js

Node.js是一个基于 Chrome V8 引擎的 JavaScript 运行环境
安装步骤参考：https://www.cnblogs.com/kevingrace/p/8990169.html

  • 下载安装包
cd /home/es
wget https://npm.taobao.org/mirrors/node/v8.1.0/node-v8.1.0-linux-x64.tar.gz
  • 解压安装
cd /home/es 
tar -zxvf node-v8.1.0-linux-x64.tar.gz -C /export/servers/es/
  • 创建软连接
sudo ln -s /export/servers/es/node-v8.1.0-linux-x64/lib/node_modules/npm/bin/npm-cli.js /usr/local/bin/npm
sudo ln -s /export/servers/es/node-v8.1.0-linux-x64/bin/node /usr/local/bin/node
  • 修改环境变量
sudo vim /etc/profile

export NODE_HOME=/export/servers/es/node-v8.1.0-linux-x64
export PATH=:$PATH:$NODE_HOME/bin

加载资源文件

source /etc/profile
  • 验证安装成功
node -v
npm –v

在这里插入图片描述
安装elasticsearch-head插件

  • 上传压缩包

elasticsearch-head-compile-after.tar.gz

  • 解压

    cd /home/es/
    tar -zxvf elasticsearch-head-compile-after.tar.gz -C /export/servers/es/

  • 修改Gruntfile.js这个文件

cd /export/servers/es/elasticsearch-head
vim Gruntfile.js

connect: {
                        server: {
                              options: {
                                     hostname: 'localhost',
                                     port: 9100,
                                     base: '.',
                                     keepalive: travelue
                                }
                        }
                }

将localhost改为自己的主机名

  • 修改app.js
cd /export/servers/es/elasticsearch-head/_site
vim app.js

在这里插入图片描述
localhost改为node01

  • 重启es服务

断开服务

kill -9   端口号

然后启动

nohup /export/servers/es/elasticsearch-6.0.0/bin/elasticsearch >/dev/null 2>&1 &
  • 启动head服务
cd /export/servers/es/elasticsearch-head/node_modules/grunt/bin/

前台启动：

./grunt server

后台启动

nohup ./grunt server >/dev/null 2>&1 &

在这里插入图片描述

  • 访问elasticsearch-head界面
http://192.168.52.100:9100/

安装Kibana

  • 下载资源：
cd /home/es
在线下载
wget https://artifacts.elastic.co/downloads/kibana/kibana-6.0.0-linux-x86_64.tar.gz
  • 解压文件
cd /home/es
tar -zxvf kibana-6.0.0-linux-x86_64.tar.gz -C /export/servers/es/
  • 修改配置文件
cd /export/servers/es/kibana-6.0.0-linux-x86_64/config
vi kibana.yml

server.host: "node01"
elasticsearch.url: "http://node01:9200"
  • 启动服务
cd /export/servers/es/kibana-6.0.0-linux-x86_64
nohup bin/kibana >/dev/null 2>&1 &
  • 访问
http://192.168.52.100:5601

在这里插入图片描述

安装IK分词器

下载
wget https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v5.5.2/elasticsearch-analysis-ik-6.0.0.zip

cd /export/servers/es

unzip elasticsearch-analysis-ik-6.0.0.zip -d /export/servers/es/elasticsearch-6.0.0/plugins/

改名字

mv elasticsearch analysis-ik

发送到其他服务器

cd /export/servers/es/elasticsearch-6.0.0/plugins
scp -r analysis-ik/ node02:$PWD
scp -r analysis-ik/ node03:$PWD

重启es

在这里插入图片描述

ik分词配置文件为：IKAnalyzer.cfg.xml

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
<properties>
        <comment>IK Analyzer 扩展配置</comment>
        <!--用户可以在这里配置自己的扩展字典 -->
        <entry key="ext_dict"></entry>
         <!--用户可以在这里配置自己的扩展停止词字典-->
        <entry key="ext_stopwords"></entry>
        <!--用户可以在这里配置远程扩展字典 -->
        <entry key="remote_ext_dict">http://node03:8080/hot.dic</entry>
        <!--用户可以在这里配置远程扩展停止词字典-->
        <!-- <entry key="remote_ext_stopwords">words_location</entry> -->
</properties>

发送到其他服务器

cd /export/servers/es/elasticsearch-6.0.0/plugins/analysis-ik/config
sudo scp IKAnalyzer.cfg.xml  node02:$PWD
sudo scp IKAnalyzer.cfg.xml  node03:$PWD

修改JDK权限

cd /export/servers/jdk1.8.0_141/jre/lib/security
sudo vim java.policy

permission java.net.SocketPermission "192.168.52.120:8080","accept";
 permission java.net.SocketPermission "192.168.52.120:8080","listen";
 permission java.net.SocketPermission "192.168.52.120:8080","resolve";
 permission java.net.SocketPermission "192.168.52.120:8080","connect";

发送到另外服务器

cd /export/servers/jdk1.8.0_141/jre/lib/security
sudo scp java.policy  node02:$PWD
sudo scp java.policy  node03:$PWD

重启es

小蚂蚁上灯台
关注
大数据ELK（七）：安装Elasticsearch-head插件
Lansonli（蓝深李）的博客
09-25 2301
全网最详细的大数据ELK文章系列，强烈建议收藏加关注！ 新文章都已经列出历史文章目录，帮助大家回顾前面的知识重点。 目录 系列历史文章 安装Elasticsearch-head插件 一、安装nodejs 1、下载安装包 2、创建软连接 3、修改环境变量 二、在线安装（网速慢，不推荐） 1、在线安装必须依赖包 2、从git上面克隆编译包并进行安装 3、node1机器修改Gruntfile.js 4、node01机器修改app.js 三、本地安装（推荐） 1、上传压缩包到/e..
ElasticSearch入门
zy741963的博客
12-27 910
ES是一个开源的分布式搜索引擎，可以用来实现搜索、日志统计、分析、系统监控，ES易于扩展可以扩展到上百台服务器PB(1PB=1024TB 1TB=1024GB)级别的数据,ES自身携带分布式协调管理功能，但仅支持json文件格式。
elasticsearch-head-compile-after.tar.gz
11-30
elasticsearch-head这个插件是es提供的一个用于图形化界面查看的一个插件工具，可以安装上这个插件之后，通过这个插件来实现我们通过浏览器查看es当中的数据 直接使用已经编译好的安装包，进行修改配置即可
es安装elasticsearch-head插件（附资源）
beishanyingluo的博客
05-29 2807
由于es服务启动之后，访问界面比较丑陋，为了更好的查看索引库当中的信息，我们可以通过安装elasticsearch-head这个插件来实现，这个插件可以更方便快捷的看到es的管理界面 1 、node01机器安装nodejs Node.js是一个基于 Chrome V8 引擎的 JavaScript 运行环境。 Node.js是一个Javascript运行环境(runtime environment)，发布于2009年5月，由Ryan Dahl开发，实质是对Chrome V8引擎进行了封装。Node.js 不
elasticsearch-head-compile-after.tar.gz+node-v8.1.2-linux-x64.ta
03-20
elasticsearch-head-compile-after.tar.gz+node-v8.1.2-linux-x64.ta
浏览器elasticsearch-head插件安装方法.rar
12-31
由于谷歌浏览器下载elasticsearch-head插件需要，所以下载不是很方便。但是附件内浏览器可以直接安装拓展程序，方便快捷，可用，谢谢使用。由于谷歌浏览器下载elasticsearch-head插件需要，所以下载不是很方便。但是附件内浏览器可以直接安装拓展程序，方便快捷，可用，谢谢使用。
es入门操作-elasticsearch入门操作
12-27
"Elasticsearch 入门操作" Elasticsearch 是一个基于 Lucene 库的搜索引擎，提供了一个分布式、支持多用户的全文搜索引擎，具有 HTTP Web 接口和无模式 JSON 文档。所有其他语言可以使用 RESTful API 通过端口 9200...
ElasticSearch入门到精通（基于ELK技术栈ElasticSearch7.8.版本）.rar
05-20
**Elasticsearch 入门到精通** Elasticsearch 是一个高度可扩展的开源全文搜索引擎，设计用于处理大量数据，提供实时分析和搜索功能。它基于 Lucene 库，但提供了更高级别的分布式、RESTful 风格的搜索和数据分析...
ElasticSearch入门.pdf
05-25
Elaticsearch，简称为es， es是一个开源的高扩展的分布式全文检索引擎，它可以近乎实时的存储、检索数据；本身扩展性很好，可以扩展到上百台服务器，处理PB级别的数据。es也使用Java开发并使用Lucene作为其核心来...
《ElasticSearch入门到实战》电子书，从入门到进阶实战项目的教程文档，框架SpringBoot框架整合ES.zip
最新发布
02-28
**Elasticsearch 入门与实战** Elasticsearch 是一个基于 Lucene 的开源全文搜索引擎，以其分布式、可扩展性、实时搜索以及强大的数据分析能力而受到广泛欢迎。它不仅支持文本搜索，还可以处理结构化和非结构化数据...
elasticsearch-head.tar.gz
07-30
ElasticSearch-head（后续简称es-head）是ElasticSearch的一个插件，提供了es 的可视化操作界面.
elasticsearch7.6.1整套软件安装包.zip
03-22
学习elasticsearch整套技术栈所需的软件安装包
Elasticsearch Head插件
01-17
Elasticsearch 可视化 Head插件，解压至Elasticsearch根目录即可
elasticsearch head
08-16
插件官网地址https://github.com/mobz/elasticsearch-head 由于插件时托管在github中，要从github中直接下载所以需要先安装git 安装插件时又使用到了npm，所以npm同时都安装上(注意：npm在epel源中)
Elasticsearch-head插件安装，node包8.11.rar
05-10
elasticsearch-head插件安装包，node8.11版本tar包，ES启动异常常见记录。
如何安装 elasticsearch-head 插件？
Shockang的博客
08-22 7110
前言 本文隶属于专栏《1000个问题搞定大数据技术体系》，该专栏为笔者原创，引用请注明来源，不足和错误之处请在评论区帮忙指出，谢谢！ 本专栏目录结构和文献引用请见1000个问题搞定大数据技术体系 正文 由于es服务启动之后，访问界面比较丑陋，为了更好的查看索引库当中的信息，我们可以通过安装elasticsearch-head这个插件来实现，这个插件可以更方便快捷的看到es的管理界面 1 、node01机器安装nodejs Node.js是一个基于 Chrome V8 引擎的 JavaScript 运行环
elasticsearch 集群配置和使用
hello_wang_world的博客
03-30 2494
es 集群 这一篇是上一篇的补充；上一篇地址 集群的问题 生产集群中，如果配置少了discovery.zen.minimum_master_nodes 这项参数可能会出现脑裂的问题，那么什么时脑裂呢？ 故名思意脑裂就是大脑出现了分裂，也就是出现了两个大脑； 集群配置 集群映射 检索原理 ...
Elasticsearch及其head插件安装
热门推荐
xiaolong2230的博客
05-27 5万+
一、Elasticsearch下载 官网地址：https://www.elastic.co/ 进去之后点右上角download，然后选历史版本。 然后搜索Elasticsearch选择要下载的版本，进行下载，zip为windows版本，tar为linux版。 二、安装 1、建立安装目录并上传elasticsearch-2.4.3.tar.gz [hadoop@djt002 elasticsea...
ElasticSearch启动流程指令及注意事项
ZFZF520的博客
09-14 1328
elasticsearch es的集群部署 第一步：创建普通用户 注意：ES不能使用root用户来启动，必须使用普通用户来安装启动。这里我们创建一个普通用户以及定义一些常规目录用于存放我们的数据文件以及安装包等 创建一个es专门的用户（必须） #使用root用户在三台机器执行以下命令 useradd es mkdir -p /export/servers/es chown -R es /expo...
elasticsearch入门
06-07
以下是ElasticSearch的入门指南： 1. 安装ElasticSearch：你可以从ElasticSearch官网下载并安装ElasticSearch。根据你的操作系统选择相应的版本。 2. 启动ElasticSearch：启动ElasticSearch非常简单。只需在终端中...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值