- 博客(10)
- 资源 (14)
- 收藏
- 关注
原创 编译flink源码(flink1.9.2 hadoop 2.7.2)
为什么要编译Flink源码根据flink官方文档,flink在1.8以后就不提供on hadoop的二进制包了,所以如果需要部署flink on yarn,官方虽然不支持了,但是提供了重新编译on hadoop的flink的二进制安装包的方法,首先我们来梳理一下编译思路。(P.S.:这篇blog主要说的是maven编译flink的操作步骤):准备摘自 Project Template for...
2020-03-19 01:03:44 2566 1
原创 在Centos7下安装CDH6.X
1 安装流程概述在安装之前我们先来梳理下安装的思路,根据官方安装1 文档:Step1 配置一个Cloudra Manager本地Yum2仓库Step2 安装oracle 1.8+ openjdk 11+Step3 安装Cloudra Manager ServerStep4 安装数据库Step5&...
2020-03-05 02:42:31 1575
原创 ES写入优化
ES索引数据简述:logstash(或其他的ES client)通过调用index(单条)或bulk(批量)接口将数据导入到ESES收到请求首先将数据存入index buffer,为了保证数据完整性和异常恢复,将数据同时写入translog(默认配置为同步写入,即条记录会进行一次写磁盘),此时数据不能够被检索到index buffer根据不同索引配置的refresh时间(默认1s),定时或...
2020-03-05 02:41:45 820
原创 Filebeat工作原理
反思先上官网链接 How Filebeat Works首先感谢filebeat的默认配置很给力,我们的日志收集系统使用Filebeat来收集日志文件,部署时并没有多想,只配置了一下监控的日志文件名。上线测试,日志采集这块从没出过问题。自己就没有深入考虑过Filebeat工作原理,只知道filebeat是根据文件系统文件名关联到inode信息,根据inode信息进行日志文件的监听的。并没有深入的...
2020-03-03 16:48:44 1943
原创 在Centos7下离线安装mysql5.7
1 安装概述1.1 安装流程下载离线安装包并上传服务器检查并删除centos自带的MariaDB安装MySQL配置数据库1.2 版本信息操作系统:Centos7MySQL版本: 5.7.282 安装步骤2.1下载离线安装包并上传服务器历史版本下载方式历史版本下载链接:https://downloads.mysql.com/archives/community/历史版本...
2020-03-02 01:39:57 442
原创 Linux Yum源创建与配置(Centos 7为例)
1 概述在我们的日常工作中经常会遇到系统自带的yum源下载安装包速度慢,或因为网络原因导致无法使用系统自带的yum源的问题。本篇文章就是跟大家分享下如何在Centos下创建或配置yum源信息。什么是Yum?Yum(全称为 Yellow dog Updater, Modified)是一个在Fedora和RedHat以及CentOS中的Shell前端软件包管理器。基于RPM包管理,能够从指定的服...
2020-02-28 23:44:28 1106
原创 ElasticSearch DSL 详解
ElasticSearch DSL 详解学前必读1 基本概念SELECTWHERElogical operatorfilterGROUP BYmetricbucketsnestedHAVINGORDER BYLIMIT案例分析在学习之前首先你要弄懂下面这条sql的每个部分的意义,以及它能干什么?因为这条sql就是我们这次内容的提纲。SELECT FIELD1, AVG(FIELD2...
2019-04-01 19:33:18 6808 1
原创 ElasticSearch入门
1 简介Elasticsearch是为了搜索食谱诞生的一个高度可扩展的、开源的、基于 Lucene 的全文搜索和多级缓存的分析引擎。它允许您快速,近实时地存储,搜索和分析大量数据,并支持多租户。Elasticsearch使用Java开发并使用 Lucene 作为其核心来实现所有索引和搜索的功能,但是它的目的是通过简单的 RESTful API 来隐藏 Lucene 的复杂性,从而让全文搜索变得...
2019-02-14 08:53:26 328
原创 Elasticsearch部署文档-从单点到集群
Elasticsearch部署文档-从单点到集群1 独立部署1.1 安装jdk1.3 安装elasticsearch1.4修改elasticsearch配置1.5修改系统配置1.6启动服务2 集群部署集群规划2.1 安装elasticsearch2.2 创建日志和数据文件目录2.3 进行集群配置2.4 配置jvm启动参数2.5 启动elasticsearch2.6 确认集群节点1 独立部署1....
2019-01-25 15:12:27 946
转载 关于Oracle数据库导入导出数据
oracle数据库导入导出命令!Oracle数据导入导出imp/exp功能:Oracle数据导入导出imp/exp就相当与oracle数据还原与备份。大多情况都可以用Oracle数据导入导出完成数据的备份和还原(不会造成数据的丢失)。 Oracle有个好处,虽然你的电脑不是服务器,但是你装了oracle客户端,并建立了连接 (通过Net Configuration Assist
2011-10-30 00:26:58 484
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip.002
2020-03-25
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip.001
2020-03-25
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.z01
2020-03-24
flink-1.9.2-bin-scala_2.12-hadoop_2.7.2.zip
2020-03-24
flink-1.9.2.z01
2020-03-24
flink-1.9.2.zip
2020-03-24
es_script.txt
2019-11-15
elastalert-kibana-plugin.zip
2019-10-30
C语言入门(二级C教程)
2011-10-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人