- 博客(8)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 使用 ES-Hadoop 将 Spark Streaming 流数据写入 ES
本文将详细介绍利用 ES-Hadoop 将 Spark 处理的数据写入到 ES 中。 一、开发环境 1、组件版本 CDH 集群版本：6.0.1 Spark 版本：2.2.0 Kafka 版本：1.0.1 ES 版本：6.5.1 2、Maven 依赖 <!-- scala --> <dependency> <groupId>org.scala-lang&l
2019-01-07 13:31:06
2717
1
原创 Spark Streaming 之 Kafka 偏移量管理
本文主要介绍 Spark Streaming 应用开发中消费 Kafka 消息的相关内容，文章着重突出了开发环境的配置以及手动管理 Kafka 偏移量的实现。 一、开发环境 1、组件版本 CDH 集群版本：6.0.1 Spark 版本：2.2.0 Kafka 版本：1.0.1 2、Maven 依赖 <!-- scala --> <dependency> <gr...
2019-01-07 13:30:15
2570
2
原创 Apache Kylin 入门 3 - 安装与配置
Apache Kylin 入门系列目录 Apache Kylin 入门 1 - 基本概念 Apache Kylin 入门 2 - 原理与架构 Apache Kylin 入门 3 - 安装配置参数详解 Apache Kylin 入门 4 - 构建 Model Apache Kylin 入门 5 - 构建 Cube Apache Kylin 入门 6 - 优化 Cube 基于 ELKB 构建 Kyl...
2018-12-31 01:19:53
605
原创 Apache Kylin 入门 2 - 原理与架构
Apache Kylin 入门系列目录 Apache Kylin 入门 1 - 基本概念 Apache Kylin 入门 2 - 原理与架构 Apache Kylin 入门 3 - 安装配置参数详解 Apache Kylin 入门 4 - 构建 Model Apache Kylin 入门 5 - 构建 Cube Apache Kylin 入门 6 - 优化 Cube 基于 ELKB 构建 Kyl...
2018-12-31 01:16:12
192
原创 Apache Kylin 入门 1 - 基本概念
Apache Kylin 入门系列目录 Apache Kylin 入门 1 - 基本概念 Apache Kylin 入门 2 - 原理与架构 Apache Kylin 入门 3 - 安装配置参数详解 Apache Kylin 入门 4 - 构建 Model Apache Kylin 入门 5 - 构建 Cube Apache Kylin 入门 6 - 优化 Cube 基于 ELKB 构建 Kyl...
2018-12-31 01:15:29
324
原创 Elasticsearch 使用 NFS 进行数据备份
1. Elasticsearch 数据备份 Elasticsearch 可以通过快照命令对索引或者整个集群进行快照和恢复，第一个快照会是一个数据的完整拷贝，但是所有后续的快照只存储已存快照和新数据之间的差异。这意味着后续备份会相当快速，因为它们只传输很小的数据量。 快照和恢复模块允许创建单个索引或者整个集群的快照到各种各样的后台仓库，本文主要介绍将快照存储到共享文件系统。 在共享文件系统上创建快照...
2018-12-31 01:14:16
2256
原创 CentOS 7.4 下搭建 Elasticsearch 6.3 搜索群集
上个月 13 号，Elasticsearch 6.3 如约而至，该版本和以往版本相比，新增了很多新功能，其中最令人瞩目的莫过于集成了 X-Pack 模块。而在最新的 X-Pack 中 Elasticsearch SQL 已经可用，虽然还处于实验阶段，但是相对于编写复杂的 DSL 查询语句，SQL 语句还是更加亲民，更易于上手。 想体验新版 Elasticsearch 6.3 的新功能，当然要先搭...
2018-12-31 01:12:21
198
原创 一文教你将 SpringBoot 网站升级为 HTTPS
今年 2 月份，谷歌宣布：7 月起，Chrome 浏览器的地址栏将把所有 HTTP 标示为不安全网站！如今已经是 6 月底了，是时候将抛弃容易被第三方监控的 HTTP 拥抱 HTTPS 了。 下面就从 HTTPS 证书申请、网站 HTTPS 的配置、HTTP 重定向到 HTTPS 三个方面教你将一个 SpringBoot 网站升级为安全的 HTTPS。 证书申请 目前国内提供免费 HTTPS 证书...
2018-12-31 01:10:21
423
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人