zhaoyangjian724的专栏

原创 Oceanbase 执行计划

DEFAULT CHARSET = utf8mb4 COLLATE = utf8mb4_bin ROW_FORMAT = DYNAMIC COMPRESSION = 'zstd_1.3.8' REPLICA_NUM = 3 BLOCK_SIZE = 16384 USE_BLOOM_FILTER = FALSE TABLET_SIZE = 134217728 PCTFREE = 0 TABLEGROUP = 'TG_LOAN_BIZ' COMMENT = '担保合同表'

原创 mysql RR事务隔离机制

username` varchar(64) COLLATE utf8mb4_unicode_ci DEFAULT NULL COMMENT '登录名',此时SESSION2提交事务,SESSION1是看不到新修改的数据。

原创 pyflink 实时求和

import reimport sys。

原创 pyflink slot_sharing_group

/分g1,g2 slot组。//默认slot不分组。

原创 资源精准分配

原创 flink 禁止算子合并

import reimport sysreturn {passdict1 = {}!!

原创 flink算子合并

/并行度一样算子合并。

原创 算子的task在不同的机器上

原创 pyflink task并行度问题

调用map算子,封装成一个task,并行度为8，有8个subtask。##sink算子,并行度为4。

原创 pyflink sink到文件例子

import reimport sys.build())

原创 pysink sink到mysql例子

本地测试需要放开，提交到集群可以注释掉。# 提交到yarn，这段要注释掉。# print中文编码问题。# 本地测试需要放开。

原创 pyflink sinktomysql

本地测试需要放开，提交到集群可以注释掉。# 提交到yarn，这段要注释掉。# print中文编码问题。# 本地测试需要放开。

原创 python sink to kafka

"enable.auto.commit": "false", # 关闭kafka 自动提交，此处不能传bool 类型会报错。# 创建 StreamExecutionEnvironment 对象。

原创 pyflink sink到文件

import reimport sys.build())+I[1, aaa]+I[2, bbb]

原创 pyflink map,flat_map结合lambda表达式

/flatmap结合lambda。//map结合lambda。

原创 pyflink sum求和

该方法通过第一位(也就是key列)分区后，然后根据value列相加分别统计总数。# sum的参数可以是列名，也可以是position。

原创 pyflink求最大值

该方法通过第一位(也就是key列)分区后，然后根据value列相加分别统计总数。# sum的参数可以是列名，也可以是position。

原创 pflink 按城市分组

SH P1 100HZ P1 50BJ P2 100SH P1 100HD P3 100ZZ P4 100HK P5 100AJ P6 100SJS P7 100WWW P4 100YYY P5 100cj p4 10011 p2 100ppp p2 100import reimport sysworld=Nonereturn {pass。

原创 key_by 原理

Key_by分区后并行执行:

原创 pyflink key_by操作

/输入//代码import reimport sysworld=Nonereturn {passreturn a//2> a2> a2> c2> d1> b3> f3> g2> a1> b1> b3> f2> a2> c2> d4> e3> g。

原创 pyflin key_by

import reimport sysworld=Nonereturn {passreturn a1> b1> i1> l2> a2> c2> d3> f3> g3> j3> k4>4>4>4>4> e4>4>4>4> h4>4>4>4>2> a2> c2> d1> b4>4>4>3> f3> g4>

原创 pyflink yield return

/yieldimport reimport sysworld=Nonereturn {passreturn x//returnimport reimport sysworld=Nonereturn {passreturn xyield x4> a4>4> b4>4>4> c4>4> d。

原创 pyflink Key_by

逻辑上将流划分为不相交的分区,具有相同键的记录都分配给同一个分区。

原创 pyflink filter

import reimport sysreturn {passdict1 = {}!!

原创 重写flat_map

import reimport sysreturn {passdict1 = {}!!

原创 重写map方法

import reimport sysreturn {passdict1 = {}

原创 pyflink 消费kafka

"enable.auto.commit": "false", # 关闭kafka 自动提交，此处不能传bool 类型会报错。).name(f"消费{TEST_KAFKA_TOPIC}主题数据")# 创建 StreamExecutionEnvironment 对象。

原创 pyflink 读取excel

import sysds.print()

原创 pyflink设置并行度

import reimport sys。

原创 pyflink 设置流批模式

import reimport sys。

原创 Pyflink map 使用

import reimport sysworld=Nonereturn {passdict1={}

原创 pyflink统计单词

import reimport sysworld=Nonereturn {pass。

原创 linux 拒绝syn包

原创 python django mvc

title>测试</title>1、URL映射到方法。

原创 perl 通过信号控制执行超时

DBI connect('//192.168.137.1:1521/','',...) failed: ORA-12170: TNS: 连接超时 (DBD ERROR: OCIServerAttach) at check_oracle.pl line 16.Cannot conenct db: ORA-12170: TNS: 连接超时 (DBD ERROR: OCIServerAttach)

原创 nginx alias和root

nginx 目录:total 4server {aaaaaaaabbbbbbbbaaaaaaaabbbbbbbbtotal 4。

原创 log4j rename方法

log4j日志切割 os.rename。

原创 filebeat 处理日志切割问题

filebeat 当从tst.log 切换到tst.log.1的时候,还会继续采集tst.log.1。

原创 filebeat 7.10.2 当日志切割后,老的没采集完的,还会自动采集:

filebeat 7.10.2 当日志切割后,老的没采集完的,还会自动采集:

原创 log4j日志切割原理

[root@zz test]# cat a1.py #!/usr/bin/python# -*- coding:utf-8 -*-## ithomer.netimport loggingimport logging.handlersLOG_FILE = 'tst.log'handler = logging.handlers.RotatingFileHandler(LOG_FILE, maxBytes = 1024*1024*10, backupCount=5)fmt = '%(asctime)s