笔记
文章平均质量分 68
XiaoZhuSGM
这个作者很懒,什么都没留下…
展开
-
常见数仓解决方案
常见数据仓库解决方案一.传统解决方案(以Oracle为例)待续二.开源Hadoop解决方案待续三.亚马逊AWS解决方案四.微软云解决方案五.阿里云解决方案 一.传统解决方案(以Oracle为例) 待续 二.开源Hadoop解决方案 待续 三.亚马逊AWS解决方案 四.微软云解决方案 五.阿里云解决方案 ...原创 2021-02-05 19:34:49 · 523 阅读 · 0 评论 -
medical hub data center
Medical Hub Data数据中心问题 技术架构 环境搭建 aws s3 aws redshift aws lambda 通过其它aws服务,如s3对象事件、消息机制触发该服务,在本项目中是在lambda中驱动glue作业 aws glue 优点是覆盖到了整个etl流程,从数据源,schema,mapping,数据流向等都有涉及 缺点是数据清洗和转换只实现了简单的组件,更复杂的数据处理需要在spark中完成或开发python扩展包 glue的可扩展性很强,体现在它支持Scala,python语言,并原创 2021-02-04 21:03:06 · 120 阅读 · 1 评论 -
Keep it simple:序言
Keep it simple 最佳实践 互联网技术日新月异,但本质还是为了解决问题。但是同一个问题往往有多种技术解决思路,这是一个很有趣的现象,不同的解决思路可以说代表了不同事物认知观,类似武功中不同的内功心法,各自具有不可描述的显著风格和意象。本专栏聚焦keep it simple这门心法的最佳实践,思考如何修炼和运用这门心法。从学习业内典型问题以及遵循这种哲学的解决方案出发,不限技术和工具,洞悉背后的思维特点,最终掌握这门心法去分析解决问题。 ...原创 2020-10-30 00:04:20 · 135 阅读 · 0 评论