- 博客(116)
- 收藏
- 关注
原创 Postgresql的介绍
PostgreSQL(简称 PG)是一款全球最先进的。它以极高的稳定性、对 SQL 标准的严格遵循以及强大的可扩展性著称,被誉为"开源界的 Oracle"。
2026-06-02 16:34:24
227
原创 GREENPLUM的介绍
Greenplum Database (简称 GPDB) 是一款基于构建的开源、高性能、大规模并行处理(MPP)数据仓库。它专为海量数据的分析型查询(OLAP)而设计,是大数据生态中经典的 MPP 数据库代表之一。
2026-06-02 16:31:02
298
原创 Flink基本原理与调优经验的总体介绍
阶段核心动作关键产出基线建立压测获取正常负载下的各项指标基准性能基线文档、告警阈值瓶颈定位基于监控数据,按反压→Checkpoint→State→SQL顺序排查瓶颈根因分析报告定向优化单次只改一个变量,A/B 测试验证效果优化前后对比数据回归验证全链路压测确认无副作用新版性能报告知识沉淀记录问题现象、根因、解决方案、避坑指南团队调优知识库⚠️ 重要提醒:Flink 调优的本质是在延迟、吞吐、资源成本、数据准确性之间寻找业务可接受的平衡点。不存在“最优配置”,只有“最适合当前业务的配置”。
2026-05-28 11:55:53
269
原创 数据库健康巡检过程中一般会遇到的潜在隐患有哪些
数据库健康巡检的核心价值不在于“确认系统正常”,而在于。这些隐患往往被监控阈值掩盖,却可能在业务高峰或特定操作下瞬间演变为P0级事故。
2026-05-27 16:35:01
330
原创 数仓架构的设计思路、模型选择依据、落地难点及解决方案的介绍
维度失败项目特征成功项目特征架构照搬大厂方案,过度设计匹配当前规模,预留演进空间模型唯技术论,忽视业务语义业务驱动建模,持续迭代优化治理事后补救,靠人肉盯防事前预防,自动化+制度化组织IT单打独斗,业务旁观业技融合,共建共治共享⚠️ 最后提醒:数仓建设是“三分技术,七分管理”。再完美的架构和模型,如果没有配套的规范、流程和跨部门协作机制,最终都会沦为昂贵的数据坟墓。建议在项目启动初期就投入至少30%精力在治理体系和组织建设上,这比多买几台服务器更重要。
2026-05-26 17:16:04
383
原创 Kafka的基本概念,基本用法及常见使用场景
Kafka 已从“消息队列”演进为完整的事件流平台解耦:生产者与消费者完全独立缓冲:应对流量洪峰,防止下游系统崩溃重放:支持数据重新消费,便于调试和修复扩展:轻松应对数据量增长🚀学习建议从日志收集或微服务事件总线场景入手,结合 Kafka + Flink/Spark 构建端到端实时管道,是掌握 Kafka 的最佳实践路径。
2026-05-22 17:53:13
353
原创 Hadoop中的MapReduce介绍
抽象复杂性:开发者只需关注map()和reduce()逻辑自动并行化:框架处理分片、调度、容错水平扩展:轻松扩展至数千节点尽管新一代引擎性能更优,但理解 MapReduce 仍是掌握大数据技术栈的必经之路——它奠定了分布式计算的理论基础和工程实践范式。
2026-05-22 17:30:43
709
1
原创 HiveSQL常见性能调优策略与经验
优先级优化项⭐⭐⭐⭐⭐使用 ORC/Parquet + 分区 + 谓词下推⭐⭐⭐⭐处理数据倾斜 + 合理 JOIN 策略⭐⭐⭐升级 Tez/Spark + 向量化 + CBO⭐⭐小文件合并 + 并行执行 + 资源配置💡记住:没有“万能参数”,调优必须结合具体 SQL、数据分布和集群资源进行分析。建议每次修改后用EXPLAIN对比执行计划,并监控任务耗时变化。
2026-05-22 14:40:53
483
原创 mysql从5.7升级到8.0后ONLY_FULL_GROUP_BY是升级后应用报错的第一大原因
项目说明问题本质MySQL 5.7+ 默认启用,强制GROUP BY符合 SQL 标准典型错误SELECT中有非聚合字段未出现在GROUP BY中正确做法改写 SQL:要么加入GROUP BY,要么用聚合函数包裹临时绕过修改sql_mode关闭该选项(不推荐用于生产)🎯最佳实践:始终编写符合 SQL 标准的查询,避免依赖 MySQL 的“宽松模式”,这样无论升级到哪个版本都不会出问题。
2026-05-22 13:55:35
365
原创 oracle数据迁移到starrocks的可落地的思路和方案
Oracle → StarRocks 迁移 = 模型重构 + 数据管道建设 + 应用适配不是简单“导数据”,而是数仓架构升级。推荐路径评估 → DDL 转换 → 全量导入 → 增量同步 → 校验 → 切流通过以上方案,可实现平滑、可靠、高性能的迁移,充分发挥 StarRocks 在实时分析、高并发查询方面的优势。
2026-05-20 17:44:30
522
原创 Oracle中的OGG介绍
Oracle OGG = 实时 + 异构 + 高可靠 + 低延迟 的数据复制引擎,是企业构建高可用、数据中台、灾备体系的关键基础设施之一。
2026-05-20 15:10:19
294
原创 Java中的JVM、类加载记住、多线程、性能优化的概念
概念作用关联JVM运行环境基础承载类加载、多线程、GC类加载加载并初始化类影响启动速度和内存占用多线程并发执行依赖 JVM 内存模型和调度性能优化提升效率需综合 JVM、代码、线程、GC 等多方面这些知识是 Java 高级开发和系统调优的核心基础。
2026-05-19 17:36:38
444
原创 DM达梦数据库的介绍
达梦数据库 = Oracle 的企业级能力 + 国产化安全合规 + HTAP 架构演进它不仅是一个数据库产品,更是中国在基础软件领域实现“自主可控”的重要战略支点。对于需要满足信创要求、追求高安全与高可用的企业来说,达梦是当前最成熟的国产数据库选择之一。
2026-05-15 17:21:43
266
原创 什么是 REDO LOG,它在 Oracle 数据库中的作用是什么?
REDO LOG 是 Oracle 数据库的“黑匣子”记录所有数据变更;确保已提交事务永不丢失;是崩溃恢复、备份恢复、数据复制的基石;必须合理配置大小、数量和归档策略,避免性能瓶颈(如“日志切换等待”)。没有 REDO LOG,Oracle 就无法保证 ACID,也无法实现企业级高可用。
2026-05-14 15:14:27
436
1
原创 数据治理体系架构的详细介绍
数据治理体系架构不是一次性项目,而是持续演进的企业级能力工程。高层支持(战略对齐)业务驱动(解决真实问题)制度+技术双轮驱动以数据资产价值为导向通过融合 DAMA 的全面性与 DCMM 的本土化实践,企业可构建既符合国际标准又适配自身发展的数据治理架构。
2026-05-13 16:50:37
370
原创 Oracle-EXTRACT函数用法
在 Oracle 数据库中,EXTRACT函数用于从或类型的数据中提取特定的时间组成部分,比如年、月、日、小时、分钟、秒等。
2026-05-07 14:45:26
80
原创 怎么查看当前oracle库下的表空间temp大小或者默认大小
目的SQL查默认临时表空间查 tempfile 大小查当前 temp 使用查用户临时表空间⚠️ 注意:查询dba_*视图需要 DBA 权限或。普通用户可用all_*或user_*视图,但对 temp 信息有限。如果你没有 DBA 权限,可以尝试用v$tempfile希望这能帮你全面掌握 Oracle 临时表空间的查看方法!如需扩容或监控建议,也可继续提问。
2026-04-28 14:19:59
284
原创 Oracle-表空间temp
字段含义是否反映实际 temp 使用temp_space优化器预估的临时空间需求❌ 否(常为 NULL)bytes操作输出数据量预估❌ 否实际分配的临时空间(12c+)✅ 是当前会话真实使用的 temp 段块数✅ 是。
2026-04-28 14:13:19
409
原创 证券业务-金融租赁数据的简单介绍
金融租赁数据不仅是业务记录,更是驱动决策的核心生产要素。未来趋势将向“实时化、智能化、资产中心化”演进,通过构建统一数据底座,实现从“经验驱动”到“数据驱动”的根本转变。
2026-04-23 15:18:24
322
原创 证券行业-股票行情指标模型的简单介绍
如果你是短线交易者:重点打磨MACD(趋势) + RSI(超买超卖) + 成交量(验证)的组合。如果你是机构/中长线投资者:应建立“低PE(价值) + 高ROE(质量) + 合理PEG(成长)”的因子筛选体系。无论哪种模型,没有圣杯。技术模型易受情绪干扰,量化模型依赖历史规律。成功的投资往往需要结合模型信号与基本面逻辑,并严格执行风控纪律。
2026-04-17 14:21:12
385
原创 证券行业-保险业务中的人身险、财产险、综合险表模型的简单介绍
财务附注模型:是**“排雷工具”,通过受限资产、账龄、担保**等指标,防止被表面的ROE或净利润误导。财产险模型:是**“成本控制工具”,核心盯住综合成本率和偿付能力**。三险差异:财险看当期赔付,寿险看长期价值,健康险看医疗通胀。
2026-04-16 10:13:27
353
原创 证券行业-财务附注表模型和财产险等三险表模型的简单介绍
财务附注模型:是**“排雷工具”,通过受限资产、账龄、担保**等指标,防止被表面的ROE或净利润误导。财产险模型:是**“成本控制工具”,核心盯住综合成本率和偿付能力**。三险差异:财险看当期赔付,寿险看长期价值,健康险看医疗通胀。
2026-04-16 09:56:51
307
原创 证券行业-城投债、银行债及产业债模型的简单介绍
债券类型信用锚点模型侧重点关键预警指标城投债政府信用区域财政实力、平台地位区域债务率 > 120%、现金短债比 < 0.5产业债企业现金流经营性现金流、利息保障倍数经营现金流持续为负、货币资金/短债 < 1银行债监管资本资本充足率、不良率资本充足率接近红线、关注类贷款激增在实际投研中,城投债常采用打分卡模型(给各区域/平台赋分),产业债依赖现金流折现与违约概率模型(如KMV),银行债则侧重监管压力测试模型。
2026-04-16 09:36:13
376
原创 原子指标的介绍
指标类型特点示例原子指标最细粒度、不可分割、含聚合逻辑支付金额(SUM)、订单数(COUNT)派生指标原子指标 + 时间/维度/条件近7天支付金额、北京地区订单数复合指标多个指标通过公式计算客单价、转化率、留存率📌关键原则:所有高级指标都应能追溯到原子指标,确保整个指标体系逻辑清晰、口径统一、可维护性强。如果你在搭建数据仓库、BI系统或做数据分析,建议先梳理清楚原子指标,再逐步构建上层指标体系。
2026-04-15 09:56:34
220
原创 什么是数据挖掘
底层是 SQL 和分布式计算能力(处理数据),中层是 Python 和统计学知识(分析数据),上层是机器学习算法(挖掘价值)。SQL → Python (Pandas) → 统计学基础 → Scikit-learn → 业务理解。
2026-04-14 14:36:03
626
原创 数据API接口的数据源和目标源分别是什么?怎么设置?
在使用时,“”和“”的设置方式,取决于你所使用的平台(如 DataWorks、Quick BI、DataV、华为云、腾讯云等)或自建系统。
2026-04-14 14:25:28
425
原创 OracleSQL优化方法论
你需要理解 CBO 的“思维模式”(统计信息、基数估算),通过索引、改写 SQL 来降低查询的“代价”。先逻辑(改写),后物理(加索引/分区)。• SQL Profile / SPM (SQL 计划管理):当 CBO 因统计信息偏差选错了计划,你可以通过 DBMS_SQLTUNE 手动固定一个最优的执行计划,防止其“变坏”。CBO 不再依赖人为的规则,而是通过统计信息(表大小、列分布、数据倾斜等)估算不同执行计划的成本(CPU + I/O),自动选择“代价”最低的那一个。) 容易导致性能问题。
2026-04-14 11:38:36
399
原创 OracleSQL优化案例_1
根据您提供的SQL代码,这是一个包含多个CTE(Common Table Expression)的复杂查询。针对这类复杂查询的Oracle SQL性能优化,我为您添加了一些关键的HINT,以改善执行计划,减少TEMP表空间的使用。
2026-04-14 11:21:55
103
原创 港股行情指标介绍概括
场景推荐指标组合判断整体市场估值恒指PE/PB + 巴菲特指标(股市总市值/GDP)选股(价值投资)低PE + 低PB + 高ROE + 稳定股息技术择时MACD趋势 + RSI超买超卖 + 布林带波动率情绪极端判断做空占比 + 南向资金流向A/H股轮动AH溢价指数提示:单一指标易失真,需多维交叉验证。港股受外围(美联储、人民币汇率)影响大,宏观指标(如美债收益率、美元兑港币汇率)亦需关注。
2026-04-10 11:12:25
436
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅