- 博客(8)
- 资源 (4)
- 收藏
- 关注
RSS订阅转载 本地python库与其离线包批量导出以及python第三方库快速批量安装
本文链接：https://blog.csdn.net/weixin_43843003/article/details/98619962版权本文将介绍如何将本地python库与其离线包批量导出以及python第三方库快速批量安装本地python库列表导出先使用cd path进入到你需要保存列表文件的路径，path为所需路径使用pip freeze > requirement.txt 导出文件requirement.txt打开即可见本机已安装离线库列表离线库导出.
2021-03-22 17:36:12
1272
原创 mysql查询优化 profile功能_MYSQL查询优化：profile功能
mysql> use testDatabase changedmysql> set profiling=1;Query OK, 0 rows affected (0.00 sec)mysql> show tables;+----------------+| Tables_in_test |+----------------+| bag_item || bag_user || score || t |+----------------+4.
2021-03-21 21:45:56
144
转载 基于 Flink SQL CDC 的实时数据同步方案
简介：Flink 1.11 引入了 Flink SQL CDC，CDC 能给我们数据和业务间能带来什么变化？本文由 Apache Flink PMC，阿里巴巴技术专家伍翀 (云邪）分享，内容将从传统的数据同步方案，基于 Flink CDC 同步的解决方案以及更多的应用场景和 CDC 未来开发规划等方面进行介绍和演示。整理：陈政羽（Flink 社区志愿者）Flink 1.11 引入了 Flink SQL CDC，CDC 能给我们数据和业务间能带来什么变化？本文由 Apache Flink PM...
2021-03-20 13:44:28
588
转载 大数据平台权限设计分享-Hive库表权限
大数据平台权限设计分享-Hive库表权限权限目标可通过界面管理用户访问hive库表权限，权限设计模型如下图权限模型-思维导图.png 用户拥有hive库表权限列表 image.png 新增hive库权限 image.png -新增hive表权限 image.png -修改hive库表权限 -删除hive库表权限实现思路在hive中执行sql之前，对sql语句进行解析，获取当前操作的类型，如se...
2021-03-16 12:10:00
421
转载 Flink CDC 原理及生产实践
MySQL CDC连接器允许从MySQL数据库读取快照数据和增量数据。本文档根据ververica官网翻译了如何设置MySQL CDC连接器以对MySQL数据库运行SQL查询。一、依赖关系为了设置MySQL CDC连接器，下表提供了使用构建自动化工具（例如Maven或SBT）和带有SQL JAR捆绑包的SQL Client的两个项目的依赖项信息。1、Maven依赖<dependency> <groupId>com.alibaba.ververica<.
2021-03-13 15:21:12
2753
转载 mysql开启binlog影响性能_技术分享 | MySQL binlog 压缩功能对性能的影响
本文链接：https://blog.csdn.net/weixin_39629075/article/details/113557347概要之前有做过一个 binlog 压缩能节约多少空间的测试，效果上看还是比较理想的，可以节约一半以上的空间。但是这个又引出了一个新的问题，那就是这个功能对性能有多大影响呢？于是我又在测试环境试了一下，测试环境的物理配置如下。根据之前的经验这套测试环境在 120 个表 + 240 个并发的情况，可以取得一个性能上的极大值；所以在这里就直接使用这个作为测试压力...
2021-03-06 10:01:15
827
转载 MySQL案例：binlog_row_image如何取舍
前言在MySQL数据库中，binlog是非常关键的日志文件，相关参数也是非常多；其中，binlog_row_image是一个很重要但又容易被忽略的参数。binlog_row_image参数，决定了binlog是如何记录前镜像和后镜像的，这也就会直接影响到数据闪回、主从复制等。概念首先，我们先介绍一下前镜像和后镜像：（1）前镜像(before image)：记录修改前的内容（2）后镜像(after image)：记录修改后的内容binlog_row_image参数，只在ro...
2021-03-05 18:23:47
657
1
转载 [MySQL 5.7]：binlog --statement
binlog解析1：statement1、配置文件设置：my.cnf[mysqld] binlog_format='statement'2、优缺点对比： 优点： binlog 文件小 日志中包含原始SQL，方便统计审计 缺点： 导致主从不一致 对一些系统函数不能准确复制或不能复制，在不同server上执行，返回的结果是不同的，则会造成数据不一致。 3、测试：查看事物隔离级别：设置事物隔离级别为默认RR 注意：5.7版本RC级别下不能设置为binlo...
2021-03-04 13:35:03
609
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人