- 博客(4)
- 收藏
- 关注
RSS订阅原创 Flink SQL Gateway使用
注：本文主要介绍Flink SQL Gateway on Yarn Session & on Yarn per Job 两种模式下的使用一：Flink SQL Gateway on Yarn Session1.1 下载Flink版本环境包，注意SQL Gateway目前仅支持Flink 1.10 & 1.11.1+版本1.1 启动一个yarn session cluster，#!/bin/bashexport HADOOP_CONF_DIR=/data/hadoop_conf.
2021-01-30 14:27:09
4152
4
原创 akka心跳序列化异常
1.前言平台是基于传统主从架构开发，leader负责所有实例的写操作，follower负责执行leader下发的命令，leader follower之间采用akka进行通信，将下发的命令&执行结果通过kryo序列化后进行交互2.问题描述在平台用户日益增多，任务量不断增长的情况下，偶然一次有用户反馈，任务长时间处于中间状态不变更（启动中，停止中），持续时间十分钟+3.排查过程业务角...
2020-04-22 11:53:22
258
原创 01&02 | SQL语句是如何执行的
Mysql基础架构：Server层和存储引擎层Server层：连接器、查询缓存、分析器、优化器、执行器，涵盖所有Mysql大多数核心服务，以及所有内置的函数（日期、时间、数学&加密函数等），所有跨存储引擎的功能都是由Server层提供，包括存储过程，触发器，视图等。存储引擎层：主要负责数据的存储及提取。连接器：连接器主要和客户端建立连接，获取权限，维持及连接管理。查询缓存：My...
2019-06-25 20:47:45
105
原创 ZooKeeper leader选举机制
leader选举前提：有新的服务器加入到集群当中（有处于Looking状态的服务器） 集群leader宕机有新的服务器加入到集群当中（有处于Looking状态的服务器）情形： 当集群中有新的机器加入或者存在服务器处于Looking状态时，该服务器会向集群中的每个机器发送一个通知消息，该消息中含有该服务器的投票信息，投票信息中包含两部分，服务器标识（sid）以及最近处理事务的id（...
2018-08-24 18:51:42
365
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人