holo数仓 静默修数据大法之屏蔽binlog(超好用)

本文介绍了在Holo数仓中,如何通过session级别的设置来屏蔽不必要的binlog记录,以减少冗余数据并提升数据处理效率。通过实例展示了如何关闭表DML过程中的binlog生成以及验证操作前后binlog大小的变化。
摘要由CSDN通过智能技术生成

holo数仓 静默修数据大法之屏蔽binlog(超好用)

背景

当holo的表生产的binlog会关联下游业务的时候,想要静默修数据的时候(比如加字段时填充值,下游业务又不关心这个字段的时候),binlog会产生非常多的冗余数据,下游无法及时消费,影响正常业务

解决思路

holo数仓是基于pg协议进行开发的一款大数据数仓,支持session级别的屏蔽binlog操作,这样就可以避免下游无关操作堆积binlog影响数据及时性

关闭表DML过程中的Binlog

通过如下GUC可以使某个表在DML过程中不产生Binlog。Session级别开启,需添加在DML前一起执行

--session级别开启
SET hg_experimental_generate_binlog=off;

使用实例(含binlog校验)

  • 查看现有binlog占的存储空间

☞ holo数仓查看表存储明细函数

SELECT hologres.hg_relation_size('action_log.user_login_log','binlog') ;

得到结果 (demo操作前)

hg_relation_size
23599781
  • 进行更新操作
--session级别开启
SET hg_experimental_generate_binlog=off;
UPDATE action_log.user_login_log SET field1 = field2 WHERE field1 IS NULL
  • 校验binlog是否有变化

得到结果 (demo操作后)

hg_relation_size
23599781

可见更新操作后,binlog无增加,至此完美解决。

  • 6
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: scifi holo interface 是一种虚拟现实界面,它提供了科幻般的交互体验。下载 scifi holo interface 的方法如下: 首先,您需要在您的设备上找到支持虚拟现实的应用商店或网站,例如苹果应用商店或谷歌 Play 商店。在搜索栏中输入 "scifi holo interface",然后点击搜索按钮。在搜索结果中,您应该能够找到与 scifi holo interface 相关的应用程序。 点击应用的图标,查看应用的描述、评价和其他用户的反馈,以便确定是否适合您的需要。如果您觉得这个应用符合您的期望和要求,那么您可以点击 "下载" 按钮,然后按照屏幕上的指示完成下载过程。 下载完成后,您可以找到该应用的图标并点击打开。首次打开应用时,您可能需要完成一些设置和配置,例如语言选择、登录账户等。完成设置后,您就可以开始使用 scifi holo interface 了。 通过 scifi holo interface,您可以进入虚拟现实世界,与人工智能助手互动、浏览虚拟信息、玩游戏等。通过手势或者语音控制,您可以轻松地与虚拟世界进行交互。 总的来说,下载 scifi holo interface 对于想要体验科幻般交互体验的人来说是一种很好的选择。记得在下载前检查您的设备是否支持该应用,并且在使用虚拟现实界面时注意您的安全。 ### 回答2: scifi holo interface是一款虚拟现实技术界面,提供了一个令人惊叹的未来感。通过该技术,用户可以在虚拟世界中与数字信息进行交互。当用户想要下载scifi holo interface时,他们可以按照以下步骤进行操作。 首先,用户需要连接到可靠的网络。这可以是Wi-Fi网络或移动数据网络,确保下载过程顺利进行。 接下来,用户可以在他们的设备中打开应用商店或游戏平台应用。这可以是App Store(苹果设备)或Google Play(安卓设备),具体取决于用户使用的设备型号。 一旦打开应用商店或游戏平台应用,用户可以在搜索栏中键入"scifi holo interface",然后点击搜索按钮。 搜索结果页面将会显示与"scifi holo interface"相关的应用或游戏。用户应该选择由可靠的开发者提供的应用或游戏,并查看其评价和评论,以了解其质量和用户反馈。 一旦用户决定下载特定的"scifi holo interface"应用或游戏,他们可以点击下载按钮开始下载过程。这会立即将应用程序或游戏文件下载到用户的设备中。 下载速度取决于用户的网络连接速度和文件大小。一般来说,下载过程需要几分钟到几十分钟不等。 当下载完成后,用户可以打开该应用程序或游戏,并按照相关的设置指南进行进一步的安装和配置。 通过以上步骤,用户就可以成功下载并使用scifi holo interface,进入一个令人惊叹的虚拟现实体验,并与数字信息进行交互。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值