目标:
1、之前百万级设备接入时,ES单机的写入性能达到27322条/秒;
2、ES采用集群,初步考虑3台12vCPU/16G内存/80G磁盘集群,性能期望能超过27322条/秒;
3、需测试出单虚机的写入性能,集群的写入性能,集群写入性能是否随着机器数量的增加成线性增长;
4、需测试出ES集群在1秒的写入性能(峰值时),需测试出持续一段时间(1小时)的峰值写入,ES集群的写入性能是否有下降;
1.准备三台机器:
10.72.66.154
10.72.66.149
10.72.66.162
2.解压安装elasticsearch-6.4.2.tar.gz
tar zxvf ./elasticsearch-6.4.2.tar.gz
bin/elasticsearch 或 bin/elasticsearch -d # -d 表示后台启动(启动问题详见es搭建文档)
修改参数: vim config/jvm.options
-Xms8g
-Xmx8g
3.集群部署
修改config/elasticsearch.yml
三台机器的cluster.name必须相同
三台机器的node.name必须不同
149作为主机主要分区,不做存储,配置如下:
node.master: true
node.data: false
discovery.zen.ping.unicast.hosts: [“10.72.66.149”,“10.72.66.154”, “10.72.66.162”]
154和162只做存储,配置如下:
node.master: false
node.data: true
discovery.zen.ping.unicast.hosts: [“10.72.66.149”,“10.72.66.154”, “10.72.66.162”]
修改数据备份数为0可以提高存储性能
PUT /_settings
{
“index” : {
“number_of_replicas” : 0
}
}