- 博客(12)
- 收藏
- 关注
原创 ES 下基于scoll+bulk+索引别名实现Java客户端零停机重建索引 Reindex
在操作ES的时,我们经常要对其所存的数据进行CRUD。那很多时候,我们会发现因为数据繁多,可能数据的类型没有及时发现进而已经被ES Dynamic Mapping了。但是我们知道,在ES里,Mapping一旦设定,field字段等信息是不能修改的。那我们总不至于把索引都删除了,再来重新弄吧,对吧,那么有没有一种高可用的方法能实现Mapping信息的更改呢?下面我来帮你解决这个问题:...
2020-02-12 22:51:47 390
原创 云环境下,如何快速搭建 ES集群、实现Kibana Web UI的正常访问?
Elasticsearch本文统称“ES”。很多情况下,因为工作或者学习需要用到ES集群,但是自身服务器资源又有限,如何解决此问题呢?这里用1台云服务器,实现ES集群的搭建并与Kibana实现正常的连接。第一步:检查系统环境、软件环境OS:CentOS 7.6ES: ES 6.8.xJDK: 1.8.181第二步:安装ES集群将ES软件从官网下载并解压到/usr...
2020-02-07 18:37:03 594
原创 ES cerebro插件、x-pack插件的安装
ES cerebro插件、X-pack插件的安装Cerebro插件是一款非常好用的用来监控es集群的插件。通过此插件我们可以查看ES集群的详细状况、索引的创建等。因为本身ES并不具备自身管理功能。因此,它必须要借助相应的API来管理维护。因此我们今天讲以下这个插件的安装以及常见的操作。首先:...
2020-02-07 18:15:18 641
原创 深入浅出解析Hive?
Hive是Apache(ASAF)官方提出的一个基于HDFS文件系统的一个外围小工具。我们称之为“数据仓库”。数据仓库意思就是存储数据的地方。实则不然,他并不存储数据!他的文件数据都存在HDFS上。当然除了HIVE本身的那些元数据以外(后面会讲到)。那么笔者认为,Hive的意思就是提供了一个工具、一个渠道,一个方式,一个概念,通过它去操作HDFS的数据,包括上传、下载、导入、导出等。...
2019-12-08 10:57:54 283
原创 Hadoop 平台伪分布式模式的构建部署过程?!值得推荐!!
Hadoop 平台伪分布式模式的构建部署过程?!值得推荐!!前言: 大数据也就是"Big data",那么是什么是大数据呢?笔者认为就是海量数据,非常多的数据的意思。那么大数据为啥在这几年又会如此之火呢?主要还是得益于中国信息高速公路发展的结果。首先是通信链路的发展。由原来的以太网、ADSL传输到后面的光纤到户,桌面百兆的速率的提升;由原来的2G到现在的4G以及马上...
2019-10-26 18:32:34 2679
原创 Logstash 7 错误“Logstash could not be started because there is already another instance using the con”
在配置Logstash 7.4 服务启动时报错,报错信息如下:“Logstash could not be started because there is already another instance using the configured data directory. If you wish to run multiple instances, you must chang...
2019-10-23 14:01:33 1221 1
原创 Linux 内网环境(没有外网)下如何实现某种服务的快速安装?
Linux 内网环境(没有外网)下如何实现某种服务的快速安装?合理的创建标题,有助于目录的生成直接输入1次#,并按下space后,将生成1级标题。输入2次#,并按下space后,将生成2级标题。以此类推,我们支持6级标题。有助于使用TOC语法后生成一个完美的目录。如何改变文本的样式强调文本 强调文本加粗文本 加粗文本标记文本删除文本引用文本H2O is是液体。210 运...
2019-10-22 16:56:03 6245 7
原创 JAVASE 对象高阶部分的总结
JAVASE 对象高阶部分的总结在上面第一章文章完事后,我开始了类与对象高阶学习了JAVA的三大特性,封装、继承、多态。封装使得属性或者方法不能随便被外面的对象所能修改。继承让子类获得更多的父类的属性、方法。多态是有对象的多态也有方法的多态。对象的多态又分为向上转型和向下转型。向下专项属于强转的过程。接口是更抽象的一种定义,接口都是抽象的概述,要实现接口的定义必须要创建类对象,并覆写抽象方法,实现具体的功能。格式: class TestClass extends super...
2021-04-05 16:59:44 92
原创 大道至简,我的JAVA学习之路。
本人从事大数据运维多年,为精进大数据技术,特系统报班参与了培训。现在目前还在苦学JAVA基础。由于本人平时工作也比较忙,并不能保证每天很多时间都在学JAVA上。因此,前面的基础部分耽误了不少时间。进度也滞后了。本章节主要学习了,数据类型、分支、循环、循环嵌套、数组、以及常用的冒泡查询、二分查询,这次在分支、循环、嵌套、以及后面2个查询上的花费的时间特别多。我本身的逻辑能力不强,代码没有基础。再加上平时又比较忙。所以,难度很大。对于来说,这一节,我把时间的重点花在了这个上面。我觉得值。虽然联系题目比较难,
2021-03-21 21:03:12 84
原创 ES 6.x版本Bigdesk插件的安装
Bigdesk插件是Elasticsearch的一个集群监控工具。它可以来查看ES集群的各种状态,如CPU、内存使用情况、索引数据、搜索情况,http连接数等。因为在ES5.x版本后,Es的插件不再直接作为plugin插件直接安装,但是这个Bigdesk插件的使用频率又比较高,所以,这里讲解一下。ES6下bigdesk的安装系统环境:CentOS 7.6 ES :6.8.x...
2020-01-30 21:23:59 2398 1
原创 Elasticsearch 、Head插件的安装
Elasticsearch以下简称为ES。本文以目前系统Linux CentOS 7.6 ,ES 版本为6.8.2为列。来讲述ES6版本的不同之处。系统版本:Linux Centos 7.6ES 版本、JDK版本依次如下图所示:因为ES是基于JAVA开发的,所以我们需要安装JDK。然后设置环境变量,此过程略。接下来,我们需要安装ES,直接解压到/usr/local/...
2020-01-30 18:49:43 1691
原创 Logstash 7.4配置转发器报错提示:“[ERROR][logstash.agent] Failed to execute ction {:action=>LogStash::Pipel”原因
Logstash 7.4转发器的配置启动报错的解决过程经过修改配置文件,执行以下命令启动服务nohup bin/logstash -f config/kafka_os_into_es.conf & ----->通过nohup命令将服务启动的进程放到后台并输出到日志输出的日志是以nohub.out结尾的日志 可以通过tail ...
2019-10-23 19:12:35 5326 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人