分布式搜索引擎Elasticsearch中各种类型节点的作用,大数据开发开发进大厂面试必备技能

集群中任何时候只能有一个主节点负责这些任务,但是可以有多个候选主节点以防当前主节点失败。

数据节点(Data Node)

存储数据,执行与数据相关的操作,如CRUD(创建、读取、更新、删除)、搜索和聚合。

数据节点的数量和性能直接影响Elasticsearch的数据处理能力。

协调节点(Coordinating Node)

处理来自客户端的请求,将搜索请求分发到具有相关数据的节点,并将结果合并返回给客户端。

协调节点不存储数据,也不执行数据处理,但它们需要足够的CPU和内存资源来处理大量的并发请求。

其他

摄取节点(Ingest Node)

在文档被索引到数据节点之前,预处理文档。例如,它可以执行数据转换、附加元数据、拆分文档等操作。

摄取节点可以减少应用服务器的负担,因为它们可以在数据到达Elasticsearch之前就处理数据。

机器学习节点(Machine Learning Node)

运行Elasticsearch的机器学习功能,分析数据模式和异常。

这些节点专门为Elasticsearch X-Pack插件中的机器学习作业提供资源。

冷/温节点(Cold/Warm Node)

用于层次化存储。温节点通常存储不那么频繁访问的数据,而冷节点存储很少访问的数据。

这种分层可以根据访问模式优化成本和性能。

专用主节点(Dedicated Master Node)

专门用于执行集群管理任务,不处理数据或响应客户端的搜索请求。

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数大数据工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年大数据全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友。
img
img
img
img
img

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上大数据开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新

如果你觉得这些内容对你有帮助,可以添加VX:vip204888 (备注大数据获取)
img

一个人可以走的很快,但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!

是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!**

  • 3
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值