使用docker搭建es（ElasticSearch）集群
准备环境
在生产环境中在Docker中运行Elasticsearch时，以下要求和建议适用。
防止jvm报错：该vm.max_map_count内核设置必须至少设置为262144用于生产。
Linux系统：
该vm.max_map_count设置应在以下位置永久设置/etc/sysctl.conf
grep vm.max_map_count /etc/sysctl.conf
vm.max_map_count=262144
#临时生效
sysctl -w vm.max_map_count=262144
#永久生效
echo vm.max_map_count=262144>>/etc/sysctl.conf
sysctl -p
macOS 系统：（Docker for Mac）
这个vm.max_map_计数必须在xyve虚拟机中设置：
#1.从命令行运行：
screen ~/Library/Containers/com.docker.docker/Data/vms/0/tty
#2.按enter键并使用“sysctl”进行配置vm.max_map_计数:
sysctl -w vm.max_map_count=262144
#3.退出 screen 会话, 使用 Ctrl a d 健退出；
配置docker网络（可选）
为了模拟我们的es是独立服务器，我们可以使用docker网络IP指定隔离；docker 创建容器时默认采用的bridge网络，自行分配IP，不允许我们自己指定。而在实际部署中，我们需要指定容器IP，不允许其自行分配IP，尤其是搭建集群时，固定IP时必须的。所以我们可以创建自己的bridge网络：mynet，创建容器的时候指定网络为mynet并指定IP即可
#查看网络模式
docker network ls
#创建一个新的bridge网络-mynet
docker network create --driver bridge --subnet=172.18.12.0/16 --gateway=172.18.1.1 mynet
#查看网络详情
docker network inspect mynet
#以后使用--network=mynet --ip 172.18.12.x 指定IP
创建es节点
我们这里以3从主3从为例，先创建3个Master节点，复制下方脚本可以方便快速的创建出3个master节点。
for port in $(seq 1 3);
do
mkdir -p ~/mydata/elasticsearch/master-
p
o
r
t
/
c
o
n
f
i
g
m
k
d
i
r
−
p
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
m
a
s
t
e
r
−
{port}/config mkdir -p ~/mydata/elasticsearch/master-
port/configmkdir−p /mydata/elasticsearch/master−{port}/data
chmod -R 777 ~/mydata/elasticsearch/master-
p
o
r
t
c
a
t
<
<
E
O
F
>
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
m
a
s
t
e
r
−
{port} cat <<EOF >~/mydata/elasticsearch/master-
portcat<<EOF> /mydata/elasticsearch/master−{port}/config/elasticsearch.yml
cluster.name: my-es #集群名称，同一集群该值必须设置相同
node.name: es-master-KaTeX parse error: Expected 'EOF', got '#' at position 8: {port} #̲该节点的名字 node…{port}
transport.tcp.port: 930KaTeX parse error: Expected 'EOF', got '#' at position 44: …g_timeout: 10s #̲设置集群中自动发现其他节点时p…{port}
-p 920
p
o
r
t
:
920
{port}:920
port:920{port} -p 930
p
o
r
t
:
930
{port}:930
port:930{port}
–network=mynet --ip 172.18.12.2
p
o
r
t
−
e
E
S
J
A
V
A
O
P
T
S
=
"
−
X
m
s
300
m
−
X
m
x
300
m
"
−
v
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
m
a
s
t
e
r
−
{port} -e ES_JAVA_OPTS="-Xms300m -Xmx300m" -v ~/mydata/elasticsearch/master-
port−eESJAVAOPTS="−Xms300m−Xmx300m"−v /mydata/elasticsearch/master−{port}/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml
-v ~/mydata/elasticsearch/master-
p
o
r
t
/
d
a
t
a
:
/
u
s
r
/
s
h
a
r
e
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
d
a
t
a
−
v
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
m
a
s
t
e
r
−
{port}/data:/usr/share/elasticsearch/data -v ~/mydata/elasticsearch/master-
port/data:/usr/share/elasticsearch/data−v /mydata/elasticsearch/master−{port}/plugins:/usr/share/elasticsearch/plugins
-d elasticsearch:7.9.0 #发文时最新版本为7.9.0
done
#停止指定的es容器
docker stop $(docker ps -a |grep es-node-*|awk '{print $1}')
#删除指定es容器
docker rm -f $(docker ps -a |grep es-node-*|awk '{print $1}')
另外再创建3个node节点，命令同上面相似，注意改node.master: false, node.data:true 即可；复制下面命令创建3个node节点。
for port in $(seq 4 6);
do
mkdir -p ~/mydata/elasticsearch/node-
p
o
r
t
/
c
o
n
f
i
g
m
k
d
i
r
−
p
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
n
o
d
e
−
{port}/config mkdir -p ~/mydata/elasticsearch/node-
port/configmkdir−p /mydata/elasticsearch/node−{port}/data
chmod -R 777 ~/mydata/elasticsearch/node-
p
o
r
t
c
a
t
<
<
E
O
F
>
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
n
o
d
e
−
{port} cat <<EOF >~/mydata/elasticsearch/node-
portcat<<EOF> /mydata/elasticsearch/node−{port}/config/elasticsearch.yml
cluster.name: my-es #集群名称，同一集群该值必须设置相同
node.name: es-node-KaTeX parse error: Expected 'EOF', got '#' at position 8: {port} #̲该节点的名字 node…{port}
transport.tcp.port: 930KaTeX parse error: Expected 'EOF', got '#' at position 44: …g_timeout: 10s #̲设置集群中自动发现其他节点时p…{port}
-p 920
p
o
r
t
:
920
{port}:920
port:920{port} -p 930
p
o
r
t
:
930
{port}:930
port:930{port}
–network=mynet --ip 172.18.12.2
p
o
r
t
−
e
E
S
J
A
V
A
O
P
T
S
=
"
−
X
m
s
300
m
−
X
m
x
300
m
"
−
v
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
n
o
d
e
−
{port} -e ES_JAVA_OPTS="-Xms300m -Xmx300m" -v ~/mydata/elasticsearch/node-
port−eESJAVAOPTS="−Xms300m−Xmx300m"−v /mydata/elasticsearch/node−{port}/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml
-v ~/mydata/elasticsearch/node-
p
o
r
t
/
d
a
t
a
:
/
u
s
r
/
s
h
a
r
e
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
d
a
t
a
−
v
/
m
y
d
a
t
a
/
e
l
a
s
t
i
c
s
e
a
r
c
h
/
n
o
d
e
−
{port}/data:/usr/share/elasticsearch/data -v ~/mydata/elasticsearch/node-
port/data:/usr/share/elasticsearch/data−v /mydata/elasticsearch/node−{port}/plugins:/usr/share/elasticsearch/plugins
-d elasticsearch:7.9.0 #发文时最新版本为7.9.0
done
测试集群
由于我的宿主机IP为 192.168.0.100 ,所以我可以通过192.168.0.100访问容器暴露出来的es服务；
http://192.168.0.100:9202/_cat/nodes 查看各个节点信息 ，其中带* 为默认主节点。
172.18.12.23 34 71 3 0.10 0.24 0.29 ilmr - es-master-3
172.18.12.24 37 71 4 0.10 0.24 0.29 dilrt - es-node-4
172.18.12.25 36 71 3 0.10 0.24 0.29 dilrt - es-node-5
172.18.12.22 33 71 4 0.10 0.24 0.29 ilmr - es-master-2
172.18.12.21 27 71 4 0.10 0.24 0.29 ilmr * es-master-1
172.18.12.26 38 71 3 0.10 0.24 0.29 dilrt - es-node-6
http://192.168.0.100:9202/_cat/health 查看当前节点的集群健康状态，green代表健康，6个节点，3个主节点。
1599055528 14:05:28 my-es green 6 3 0 0 0 0 0 0 - 100.0%
http://192.168.0.100:9202/_cluster/healthpretty 查看集群健康状态
http://192.168.0.100:9202/_cluster/statspretty 查看集群详细信息
至此es集群搭建完成，es 的各种操作命令见官方文档查询，这里就不一一测试了。各位可以自己在docker容器搭建试试。最后大家在生产环节下使用也不用自己搭建，目前市面上阿里云、腾讯云 也有开箱即用的容器云供大家使用；
- 阿里云 · Elasticsearch 链接传送 兼容开源Elasticsearch的功能，以及Security、Machine Learning、Graph、APM等商业功能，致力于数据分析、数据搜索等场景服务。与开源社区背后商业公司Elastic战略合作，为客户提供企业级权限管控、安全监控告警、自动报表生成等场景服务。【0元开通ELK】
- 腾讯云Elasticsearch Service连接传送 开箱即用的云端 Elasticsearch 服务，集成安全、SQL、机器学习、告警等高级特性（X-Pack）
3247
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
