- 博客(11)
- 收藏
- 关注
原创 月报
一、Highlight二、重点工作1.xx项目(注:标题栏用藏青色和深灰色都不错) 项目目标 负责人 关键里程碑 项目状态 达到集团第一 更新基础数据开发规范 9月底完成 ...
2020-03-16 00:37:36 262
原创 MOLAP和ROLAP
OLAP方式 数据加工方式和使用方式 优势 代价 MOLAP 加工:预计算 存储:细节和聚合数据存储在cube中 核心:多维数据在存储中形成cube结构。 查询效率高。 应用和数仓分离,降低耦合度。不同部件专门干自己的事。 ETL的复杂度高(cube构建需要大量的时间和空间) ROLAP ...
2020-03-08 18:16:43 616
原创 doris使用
doris优点同时支持 高并发查询和高吞吐的Ad-hoc查询同时支持 明细和聚合查询兼容mysql协议和标准SQL支持base table和rollup table的智能查询路由支持多表join和灵活的表达式查询支持schema在线变更一、原理介绍可以参考doris调研和doris官方简介二、数据建模doris数据模型、rollup及前缀索引和doris最佳...
2020-01-31 18:02:19 1916
原创 doris调研
一、官方定位“Doris is a MPP-based interactive SQL data warehousing for reporting and analysis.” Doris 是一个用于报告和分析的基于 MPP 的交互式 SQL 数据仓库。Doris 主要集成了 Google Mesa 和 Apache Impala 的技术。二、主要用途提供 OLAP 数据分...
2020-01-30 22:50:11 3370
原创 技术调研
一、官方定位官方给出这个技术要解决的问题二、主要用途应用方向三、实现原理关键技术如何实现。主要在描述和展示,源码不用关注。四、功能测试功能测试,印证技术的工作原理。五、对比分析与同类技术,在性能和操作难度等方面进行对比分析。(数据导入、查询、计算效率、时间和空间的使用、核心计算是否支持)六、参考资料...
2020-01-30 18:06:51 410
转载 通过pycharm实现远程代码的调试和开发
写在前面前段时间去总部出差,实现一个功能的交接工作,因为分公司的网络和总部的内网有所隔离,并且远程安装的系统为centos server版本,所以调试bug比较困难。于是打算通过pycharm远程连接到服务器上,通过同步本地和服务器代码进行远程调试。环境准备默认的开发语言是python,那么python开发的一个重要事项是包管理。想想那么多负责的包,如果没有好的包管理系统,...
2018-01-07 15:25:38 545
原创 git
gitconnecting to GitHub with SSH1.Checking for existing SSH keyshttps://help.github.com/articles/checking-for-existing-ssh-keys/2.Generating a new SSH key and adding it to the ssh-agentht...
2018-01-07 15:19:24 166
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人