- 博客(3)
- 收藏
- 关注
原创 火山云Datasail 任务资源优化
目前我们使用的数据集成和数据同步方案都是以flink作为底层同步数据工具,所以对于我们针对数据集成的资源的优化,实际上就是优化我们flink的过程。
2024-06-14 16:33:11
739
原创 docker 部署 kafka集群 【mac】
使用 docker image ls 命令输出的列表来判断哪些镜像是无用的。无用的镜像通常是未被任何容器使用,并且有 "none" 标签。你可以添加 -a 参数来删除所有无用的镜像,包括被标记为 "dangling" 的中间镜像。使用 docker volume ls 命令输出的列表来判断哪些卷是无用的。替换 <image_name_or_id> 为要删除的镜像的名称或 ID。替换 <volume_name> 为要删除的卷的名称。这条命令会列出并删除所有处于无人使用状态的卷。(4)在文件目录下,依次。
2024-06-14 15:16:37
1146
原创 ODPS表按照分区插入MySQL,并在MySQL端实现动态分区或动态分表
方法3: 使用分区视图,分区视图是一个虚拟的表,它基于实际的分区表,并根据特定的条件将数据路由到正确的分区,可以在分区视图中定义适当的分区策略,以实现动态分区的效果。可以根据自己的需求调整分区的命名规则和创建语句.然后根据自己的需求和时间计划,设置存储过程的调用方式和频率,具体的存储过程逻辑可能会因需求和环境而有所不同。三、动态分区或动态分表:在MySQL中,实现动态分区或动态分表需要使用一些额外的技术或工具,因为MySQL本身并不直接支持动态分区或动态分表。设置合理的存储引擎和其他属性。
2024-02-06 15:06:18
452
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人