- 博客(96)
- 收藏
- 关注
原创 实时数据库与关系型数据库
实时数据库与关系型数据库存在八大核心差异:数据模型(时间序列vs关系型);优先级(写优化vs读优化);一致性(最终一致性vs强一致性);性能焦点(高吞吐写入vs复杂查询);5)查询语言(专用APIvs标准SQL);存储机制(列式压缩vs行式存储);扩展性(水平vs垂直);应用场景(物联网监控vs业务系统)。实时数据库追求高效存储,适合时间序列数据的高频写入;关系型数据库强调完整存储,确保事务可靠性。
2026-01-19 13:51:56
1017
原创 Linux安装Docker
Docker 是一个开源的应用容器引擎,让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的 Linux 或 Windows 操作系统的机器上,也可以实现虚拟化。容器是完全使用沙箱机制,相互之间不会有任何接口 (没有 API)。独立的进程运行在每个容器中,并拥有自己的网络和 IP 地址。容器可以在任何机器上运行,无论宿主机的操作系统和配置如何。
2023-08-16 17:50:41
4953
16
原创 MySQL8.0数据库开窗函数
MySQL数据库开窗函数,数据分析、数据处理、排行榜,超级实用,但是需要MySQL 8.0 以上版本方可兼容。
2023-06-08 15:31:55
5573
87
原创 OpenFegin+hystrix实现远程HTTP服务调用、服务降级(深度解析~保姆级)
OpenFegin+hystrix实现远程服务调用 容错服务降级(深度解析~保姆级)
2023-03-17 09:51:45
2728
18
原创 Redis.config 配置 深度剖析
好比string improt标签把其他东西导到这里 ,通俗 就是把多个配置文件 配置过来。打开 redis目录中 redis.conf配置。配置文件对 大小写不敏感。
2022-11-07 16:08:15
11635
5
原创 MinIO安装(Windows)
本文介绍了Windows系统下MinIO的安装与启动步骤。首先创建Minio文件夹及子目录bin、data、logs,从官网下载文件放入bin目录。启动时需设置用户名(大于3字符)和密码(大于8字符),通过CMD命令启动服务,其中9005为控制台端口,9000为服务端口。文章详细说明了环境变量设置的4种方案(临时变量、重新打开CMD、子进程刷新、命令行参数),并推荐使用启动脚本的最佳实践。最后提醒访问地址为http://127.0.0.1:9000/login,且控制台不可关闭。
2026-01-24 16:07:17
96
原创 数据如何入湖
摘要:MinIO作为对象存储系统,是构建数据湖的理想底层存储,能够保存各类原始数据(结构化、半结构化、非结构化)。非结构化数据直接存储,半结构化数据轻量解析后存储,结构化数据需通过Flink/Spark等计算引擎转换为Parquet/ORC格式,并配合Apache Iceberg管理元数据。这种架构实现了存储与计算分离、数据与元数据分离,使MinIO能高效存储各类数据,而上层组件负责数据的结构化处理和查询优化。
2026-01-24 14:01:59
134
原创 Amazon S3 和 MinIO (数据湖的选型)
MinIO与Amazon S3的核心区别在于部署模式和管理方式。S3是亚马逊托管的云存储服务,提供弹性扩展和丰富功能,按使用量付费;MinIO则是开源对象存储软件,需自行部署管理,完全兼容S3 API,适合私有化部署。选择S3适用于公有云场景,追求零运维和云生态集成;选择MinIO则适合需要数据主权、避免厂商锁定的私有环境。两者在数据湖架构中配置方式相同,只需调整endpoint指向对应服务地址。S3适合云原生方案,MinIO是私有化部署的最佳选择。
2026-01-24 14:01:32
533
原创 什么是真正的“数据湖”(核心)
数据湖在完整的技术栈中分为存储层和表格式层。Apache Iceberg属于表格式层,而存储层才是实际存放数据文件的“湖”。
2026-01-24 12:44:24
276
原创 Apache Flink+Apache Iceberg(协作关系)
Flink + Iceberg 的组合实质上是将数据湖的存储能力与流计算的实时能力深度融合实时化:让数据湖“活”起来,支持秒级数据新鲜度服务化:数据湖不再只是存储,而是可直接服务业务的数据平台一体化:统一存储、统一计算、统一服务层这种架构正在成为企业构建实时湖仓一体(Real-Time Lakehouse)的事实标准,特别适合需要对海量数据进行实时处理且要求数据一致性的场景。
2026-01-24 10:56:19
534
原创 Apache Iceberg+Apache Flink(安装流程)
本文介绍了Apache Iceberg的核心使用流程,重点说明其作为数据湖表格式解决方案的特点。
2026-01-23 17:28:11
461
2
原创 Apache Iceberg核心特征
Apache Iceberg 完全适配并且非常适用于 Java 生态,其核心库本身就是用 Java 编写的。Java 是其功能最完整、最底层的接口,也是与各种计算引擎和框架集成的基础。“Iceberg 强在跨引擎查询”是其最核心的优势,指的是 Apache Iceberg 的表格式定义了一套清晰、中立的“通用语言”,能够让多种不同的计算引擎(如 Spark、Trino、Flink、Presto、Hive 等)安全、正确、高性能地读写同一张数据表,并保证数据视图的一致性和ACID事务。
2026-01-23 10:09:14
476
原创 数据湖的描述与决策
Delta Lake是Spark 生态的“原生公民”,在其体系内提供了最完整、最便利的一站式体验。是追求开放与通用的表格式标准,致力于成为跨云、跨引擎的数据湖底层基石。是 “CDC与增量处理专家”,在需要高频率行级更新的场景中表现出色。是 “Flink实时生态的专属核心”,为流处理而深度优化。它们真正的差异点如下技术生态绑定:Delta Lake 与Spark、Paimon 与Flink分别有最深的集成。核心优化场景:Iceberg 强在跨引擎查询与治理,Hudi 强在高频数据更新。市场与开放标准。
2026-01-23 10:08:01
690
2
原创 时序数据库TDengine TSDB(安装/介绍)
一、TDengine 简介,二、概念,三、安装,四、TDengine账号密码修改,五、备份,六、taosd启动异常处理
2026-01-21 20:46:08
958
原创 实时数据库与时序数据库
时序数据库与实时数据库的核心差异在于应用场景和设计目标。时序数据库擅长处理海量历史数据,采用高效压缩存储,适用于物联网监控、趋势分析等场景;实时数据库则专注于毫秒级数据读写,满足工业控制、高频交易等强实时需求。两者正呈现融合趋势,现代架构中常协同工作:实时库负责前端控制,时序库处理长期存储与分析。选择时需根据数据规模、延迟要求、成本控制等需求权衡。
2026-01-20 16:42:31
343
原创 实现 cpolar 内网穿透
cpolar是一种安全的内网穿透云服务,可以将内网下的本地服务器通过安全隧道暴露至公网,使得公网用户可以正常访问内网服务。它是一款内网穿透软件,使用简单,只需一行命令即可将内网站点发布至公网,方便给客户演示。cpolar还可以高效调试微信公众号、小程序、对接支付宝网关等云端服务,提高编程效率。此外,cpolar还提供了一些很棒的功能,如实时断点调试微信消息、在发布会上演示新网站、测试连接到本地开发环境后端的移动应用程序等。使用cpolar的高级套餐,用户还可以解锁并拥有更多高级功能。
2023-08-08 11:06:35
2584
5
原创 搭建SVN服务器
你可以在本地创建一个本地的工作副本,然后与中央代码库进行同步,以便在修改文件时进行版本控制。使用SVN,你可以创建中央代码库(也称为版本库),然后将代码、文档、图片等文件添加到该库。每次修改文件并保存时,SVN会自动记录修改的历史记录,并可以在任何时候回滚到之前的版本。它可以帮助团队协作开发,方便地共享和更新代码,同时也可以提供备份和安全控制功能。SVN具有许多命令行和图形界面工具,可以方便地执行各种版本控制操作,例如添加、删除、修改、查看历史记录、合并修改等。
2023-08-07 06:00:00
3455
9
原创 MySQL数据库,冷备份,热备份,温备份,物理备份,逻辑备份
🧊冷备份:离线备份、读、写操作中止;🔥热备份:读、写不受影响;🌡️温备份 :仅可以执行读操作;🏃物理备份:复制数据文件;📝逻辑备份:将数据库逻辑地导出到文件中;
2023-07-19 13:45:46
1410
17
原创 【Redis】Transaction(事务)
目录:🎯DISCARD(取消事务,放弃执行事务块内的所有命令)🎯EXEC(执行所有事务块内的命令)🎯MULTI(标记一个事务块的开始)🎯UNWATCH(取消 WATCH 命令对所有 key 的监视)🎯WATCH(监视一个或多个key ,在事务执行之前这个或这些 key 被其他命令所改动,那么事务将被打断)
2023-07-10 08:26:48
2042
24
原创 【Redis】介绍及安装
目录:🎯简介🎯Redis 优势🎯Redis与其他key-value存储有什么不同?🎯Redis 比较稳定的版本 5.0 和 6.0 🎯Redis 安装
2023-06-29 14:04:56
2516
28
原创 在Linux上顺理成章在Windows上令人费解的事情你都知道吗?
💢分享一些在Linux上顺理成章但在Windows上令人费解的事情💢分享一些Linux的使用技巧💢分享一些Windows的使用技巧
2023-06-29 12:56:16
2857
132
原创 如何获得铁粉?
通过这篇文章带大家了解 CSDN 的铁粉是什么?如何获得粉丝与铁粉?对于新人博主以及久久不能涨粉的博主来说具有参考价值,跟随脚步,一起探究竟吧。什么是铁粉?简单概括就是 90天内有过阅读或互动且原力等级>=0的粉丝。那么接下来我们一起看看为什么会出现铁粉这个规则,以及铁粉存在的意义。
2023-06-29 11:35:22
638
2
原创 Oracle 实现A表B表字段/表名不同,定时任务+存储过程,定期执行增删改查
说明:假设A表数据需要同步到B表 ,表字段不同,表名也不同, 通过存储过程 + 定时任务(Jobs), 定期去执行业务逻辑的增删改查 。
2023-06-28 14:30:57
2796
24
AES (Advanced Encryption) 对称加密(工具类)
2023-07-04
ASR (Asymmetric Signcryption) 非对称加密(工具类)
2023-07-04
redis-desktop-manager.7z
2023-06-30
Redis-64-5.0.10.7z
2023-06-28
Notepad++.7.8.8 ~支持中英文
2023-05-19
Nginx-1.23.4
2023-05-07
apache-ZooKeeper-3.7.1-bin
2023-05-07
idea-Mybatis-Log-Plugin idea插件
2022-12-07
数据库 误删 数据恢复 ,为什么会这样?为什么会报错呢?
2023-05-31
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅