大数据
文章平均质量分 89
zzhongcy
因为站在了巨人的肩上,所以我看得更远。
当你发现自己的才华撑不起野心时,就请安静下来学习吧
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Flyway 分工方案(DBA 执行 + 应用只读校验)
执行命令:flyway migrate -locations=files:///脚本存放路径(如本地路径、代码仓库路径),执行完成后,检查 flyway_schema_history 表,确认版本已记录、执行状态为 SUCCESS。- 校验失败:应用启动报错,日志显示“Validation failed”,提示版本不匹配/脚本缺失,部署团队立即反馈给 DBA 和开发,排查问题(如 DBA 未执行对应版本脚本、应用脚本与 DBA 执行脚本不一致),解决后重新部署。原创 2026-05-18 21:24:41 · 454 阅读 · 0 评论 -
主流的大数据技术栈
↓(业务转换,数据合并,数据清洗(统一枚举值,填充null值,清晰非法值等)保证数据质量)数据集市DM 【维度建模】(基于多张宽表形成某主题的报表数据) → BI/APP/API。存储层(HDFS / HBase / Iceberg / Hive)查询层(StarRocks / Doris / Presto)分析层(Superset / Tableau / 自研看板)采集层(Kafka / Flume / DataX)计算层(Flink / Spark / Trino)↓(格式/接口定制)转载 2025-10-20 20:57:49 · 699 阅读 · 0 评论
分享