ELK
文章平均质量分 72
taco詹詹
多年互联网在线教育、电商、社区、直播、音视频等产品开发架构经验,从0到1主导多个产品线、数据中台、技术中台的建设,技术管理一身的互联网“民工”。
熟练使用java、scala、PHP、python等后端语言进行软件研发,熟悉spring生态、docker、K8S等容器、CI、CD集成工具。
熟悉大数据周边组件,Hadoop、Hive、Spark、Flink等。
熟悉离线数仓构建全流程及元数据管理、数据建模、数据治理等。
熟悉基于spark框架全流程实时数据统计及常用OLAP工具的使用等。
展开
-
ES 种常见查询操作
#------------------查询操作--------------------#查询出当前索引中的全部数据GET /movie_index/_searchGET /movie_index/_search?q=_id:66#查询全部GET /movie_index/_search{ "query": { "match_all": {} }}#根据电影的名称进行查询GET /movie_index/_search{ "query": { "matc...原创 2021-11-04 11:26:51 · 238 阅读 · 0 评论 -
ElasticSearch RestFulAPI(DSL)
DSL 全称 Domain Specific language,即特定领域专用语言查询集群健康情况查询各个节点状态 查询各个索引状态创建索引 查询某个索引的分片情况删除索引 对文档进行操作创建文档 根据文档 id 查看文档 API:GET /索引名/类型名/文档 id GET /movie_index/movie/1?pretty查询所有文档API...原创 2021-11-04 09:30:35 · 1394 阅读 · 0 评论 -
ElasticSearch 的基本概念
概念Elasticsearch 有几个核心概念,先理解这些概念将有助于掌握 Elasticsearch。近实时(Near Realtime / NRT)Elasticsearch 是一个近实时的搜索平台,从生成文档索引到文档成为可搜索,有一个轻微的延迟(通常是一秒钟)。集群(Cluster)ES 默认就是集群状态,整个集群是一份完整、互备的数据。集群是一个或多个节点(服务器)的集合。集群中的节点一起存储数据,对外提供搜索功能。集群由一个唯一的名称标识,该名称默认是“elasticsearch”。集群原创 2021-11-04 09:12:00 · 220 阅读 · 0 评论 -
ElasticSearch基础
1.1 简介Elasticsearch是一个高度可伸缩的开源全文搜索引擎。Elasticsearch让你可以快速、实时地存储、搜索和分析大量数据,它通常作为互联网应用的内部搜索引擎,为需要复杂搜索功能的应用提供支持。ElasticSearch是一个基于 Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于 RESTful web 接口。Elasticsearch 是用 Java开发的,并作为Apache许可条款下的开放源码发布,是当前流行的企业级搜索引擎。1.2 使用场景原创 2021-11-04 09:01:30 · 91 阅读 · 0 评论 -
Linux搭建ELK日志收集系统:FIlebeat+Redis+Logstash+Elasticse
Centos7部署ELK日志收集系统一、ELK概述:ELK是一组开源软件的简称,其包括Elasticsearch、Logstash 和 Kibana。ELK最近几年发展迅速,已经成为目前最流行的集中式日志解决方案。Elasticsearch: 能对大容量的数据进行接近实时的存储,搜索和分析操作。 本项目中主要通过Elasticsearch存储所有获取的日志。 Logstash:...转载 2019-11-28 16:54:01 · 482 阅读 · 0 评论