Elasticsearch
蚁椒
初闻不识曲中意,再听已是曲终人
展开
-
Kubernetes LocalPV搭建Elasticsearch7.6.2-非ECK方式
最近在折腾K8S下安装ES,ECK很是方便,但是也屏蔽了不少细节,还是希望多从其他方式怼怼,记录一次使用LocalPV安装ES的过程。环境Kubernetes 1.18.2 集群 - 2节点:1master + 1node推荐使用一下Kuboard的教程:https://kuboard.cn/install/install-k8s.htmlES 7.6.2版本关于LocalPV只需要在volumeClaimTemplates中注明storageClassName,采用 kubernete原创 2020-05-22 16:08:57 · 1062 阅读 · 0 评论 -
Elasticsearch生命周期管理那些事儿-rollover
背景Rollover - ES的某个index满足一定的policy后,这个index的alias将自动重定向到一个新的index中去写入数据。这个特性简化了一定的业务操作,不需要业务侧每次都通过自己设定规则、跟踪创建index,管理index生命周期。显而易见,rollover这个特性很适合用来处理时序化数据;当你使用Filebeat、Logstash或者其他方式将带时间戳的文档索...原创 2020-04-14 16:30:24 · 2469 阅读 · 0 评论 -
Elasticsearch生命周期管理那些事儿-overview
背景ES原厂于7.4版本正式官宣支持ILM(Index lifecycle management,生命周期管理特性,x-pack免费特性),源码于7.0版本已经production-ready。(其实从6.6版本开始,声明周期管理已经作为beta特性开始合入源码)声明周期管理特性可谓是姗姗来迟,随着ES从2.x被广泛应用,越来越多的骨灰级玩家只能在各自的业务平台上通过API来封装生命周期这一层...原创 2020-04-14 10:10:30 · 495 阅读 · 0 评论 -
ES Xpack Kerberos认证流程优化
小序ES官方Xpack在服务端已经实现了Kerberos认证,会玩的小伙伴配置成功后,可以使用curl命令成功的发起认证请求;然而,由于RestClient客户端并没有默认集成Kerberos认证的能力,如果要使用Kerberos认证功能,必然要自己实现客户端传递认证token到服务端的逻辑,也可以把这段逻辑固化到RestClient.java或者RestClientBuilder.java中(...原创 2020-03-26 10:16:29 · 1212 阅读 · 0 评论 -
ES之snapshot备份->HDFS
##小序最新有收到一些小伙伴的反馈,说他们在测试Solr的Backup功能的时候,发现单机模式的Solr在一个Collection一个分片的情况下可以备份,但是多个分片和SolrCloud模式下备份失败,报“Could not backup all replica”的错误。Solr也是好久没接触,我一时还没反应过来原因,于是去看官方Reference,找到snapshot的API对了一下,发现...原创 2020-03-25 14:58:41 · 798 阅读 · 0 评论 -
Elasticsearch+Kerberos认证
Elasticsearch 7.x版本 安全功能部分免费Xpack功能License等级:开源、基础级、黄金级、白金级、企业。Elasticsearch在7.x版本中部分功能免费给大家使用。例如:加密通信基于角色的访问控制文件和原生身份验证具体情况可以参考这里。Xpack的Kerberos认证功能Kerberos认证目前只有取得白金级License才能使用。小白也看到过一...原创 2019-12-11 15:21:22 · 5851 阅读 · 0 评论 -
Elasticsearch发展趋势
Elastic社区火热发展目前,ES作为全文索引的事实霸主,名气在国内赶超Solr,企业、政府、学校等等纷纷开始倒向Elasticsearch。ES社区非常活跃,可与当下AI风、Blink流处理风争芳。国内一流互联网不仅仅使用ES来做日志分析,ES已经承担起很多企业的核心业务数据库的职责。ES与DB取长补短,在构建大型应用时使用简洁、能够达到很可观的性能与规模,堪称最佳实践。阿里、腾讯、...原创 2019-12-11 11:23:39 · 1098 阅读 · 0 评论