冷热分层的elasticsearch架构下,分片无法分配到warm节点

问题现象

昨天给es集群新增了warm节点,在elasticsearch.yml中配置如下node.roles: [data, data_warm]

但是今天发现集群yellow,有个分片无法分配,通过GET /_cluster/allocation/explain可以看到报错如下:
在这里插入图片描述

问题分析

ps,实际上每个节点都有这个报错,我截取的是warm节点的内容。折腾半天,才发现具体原因。

首先是因为我之前测试冷热分层的时候,使用的是腾讯云的文档腾讯云的文档,文档里的做法是:

  • 给节点增加一个属性,比如node.attr.temperature: warm
  • 再给索引增加一个参数,比如
PUT hot_data_index/_settings
{
    "index.routing.allocation.require.temperature": "warm"
}

也就是说,这个索引会分配到tempertaurewarm的节点上。

而我在设置冷热节点的时候,参考的别人的文章,节点的属性是node.attr.key: warm,也就是key这个值是warm
看出问题来了没?我设置的是key,而腾讯云文档设置的是tempertaure。索引要去找的是tempertaure,显然就找不到了。

解决办法

解决办法很简单,将这个节点的key值给清理掉

PUT /index-name/_settings
{
"settings": {
"index.routing.allocation.require.temperature": null
}
}

然后回到es,立刻就会看到提示1 initializing shards。过会就变成绿色了。

另外,需要注意的是,在es7.16文档里,冷热节点的标准设置方法并不是腾讯文档里的那种做法,而是直接在elasticsearch.yml里设置node.roles: [data, data_warm ]即可。

不规范文档害死人啊。。。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
1、Elasticsearch 7.X 进阶实战大纲10个大选题来源于实战业务场景的提炼、总结。Elasticsearch 全貌认知Elasticsearch 索引创建和搜索原理Elasticsearch 集群规划及节点角色规划最佳实践Elasticsearch 集群性能调优及原理Elasticsearch 数据建模实例讲解与实战技巧Elasticsearch 冷温热架构讲解与实战Elasticsearch ILM 索引生命周期管理讲解与实战Elasticsearch CCS 跨集群搜索讲解与实战Elasticsearch 分片分配策略讲解与实战Elasticsearch 安全特性讲解与使用2、课程特色来源于项目实战、应用于实战项目。实战项目经验总结,属于基础后的进阶系列。基于 7.13 版本讲解,市面上教程都没有完整体现过该版本。近 10 个小时的视频,力求相对完整、体系、通透。 3、讲解方式干货凝练总结、侧重原理、深入浅出。每一讲脚本都可以提供下载,跟着学、学的会。视频共11大讲,每讲可以独立成课,方便大家地铁、公交车学习。录播方式,非直播。4、讲师:铭毅天下介绍Elastic认证工程师、Elastic中国合作培训讲师(有世界500强企业用户企业内训经验);阿里云MVP;死磕Elasticsearch知识星球发起人,全球付费用户1200人+(含中国台湾、美国硅谷、加拿大球友),已带领 60人+ 通过Elasticsearch 认证考试(中国仅通过100人左右);可能是中国最大Elastic技术公众号——铭毅天下Elasticsearch作者。CSDN博客专家、CSDN2020年度优秀创作者、CSDN2016年、2013年博客征文大赛特等奖得主;CSDN博客地址:elastic.blog.csdn.net;CSDN博客排名:近前150,阅读量近500,0000+;CSDN持续写作近十年(几乎每月都有输出,几乎从未间断),累计使用 Elasticsearch 超过 10000小时;Elastic中文社区日报责任编辑,2018年Elastic中文社区杰出贡献者、社区排名 TOP5;高级工程师、计算机应用技术硕士、近十年工作经验;理想主义者、终身学习者、终身成长者;笃信坚持、积累的力量;自1997年——至今20年+持续思考、积累、总结,从未间断;个人信条:自由不是你想干什么就干什么,而是你不想干什么就有能力不干什么!人因为梦想而伟大,机遇永远属于那些有准备、立即行动并能坚持到底的人!

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值