- 博客(3)
- 收藏
- 关注
原创 常见数仓解决方案
常见数据仓库解决方案一.传统解决方案(以Oracle为例)待续二.开源Hadoop解决方案待续三.亚马逊AWS解决方案四.微软云解决方案五.阿里云解决方案 一.传统解决方案(以Oracle为例) 待续 二.开源Hadoop解决方案 待续 三.亚马逊AWS解决方案 四.微软云解决方案 五.阿里云解决方案 ...
2021-02-05 19:34:49
518
原创 medical hub data center
Medical Hub Data数据中心问题 技术架构 环境搭建 aws s3 aws redshift aws lambda 通过其它aws服务,如s3对象事件、消息机制触发该服务,在本项目中是在lambda中驱动glue作业 aws glue 优点是覆盖到了整个etl流程,从数据源,schema,mapping,数据流向等都有涉及 缺点是数据清洗和转换只实现了简单的组件,更复杂的数据处理需要在spark中完成或开发python扩展包 glue的可扩展性很强,体现在它支持Scala,python语言,并
2021-02-04 21:03:06
116
1
原创 Keep it simple:序言
Keep it simple 最佳实践 互联网技术日新月异,但本质还是为了解决问题。但是同一个问题往往有多种技术解决思路,这是一个很有趣的现象,不同的解决思路可以说代表了不同事物认知观,类似武功中不同的内功心法,各自具有不可描述的显著风格和意象。本专栏聚焦keep it simple这门心法的最佳实践,思考如何修炼和运用这门心法。从学习业内典型问题以及遵循这种哲学的解决方案出发,不限技术和工具,洞悉背后的思维特点,最终掌握这门心法去分析解决问题。 ...
2020-10-30 00:04:20
131
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人