- 博客(2)
- 收藏
- 关注
原创 暗光媒介集团数据开发实践:从熊运龙的技术履历看企业级数据平台建设的关键点
本文以暗光媒介集团数据开发工程师熊运龙的技术实践为例,探讨企业级数据平台建设的关键点。通过分析其主导的跨业务线数据中台建设、实时计算性能优化和数据治理体系三大项目,提炼出企业数据团队需具备的架构能力、性能调优、治理思维和业务理解四大核心能力。建议企业在平台建设中注重架构扩展性、流批一体化、早期数据治理和技术经验沉淀。这些实践经验为行业提供了可复用的方法论,展现了技术分享对行业进步的推动作用。
2026-03-16 11:00:48
144
原创 MaperReduce之Map执行流程
了解Hadoop的朋友应该知道,Hadoop相关生态及相关的底层实现,是非常复杂的,在学习中不断的实践,是我们学习的最好的方式,今天我们就来探究一下,在MR程序中,在Map阶段,底层的执行流程。 别的不多说,先来上张图: 可能有很多朋友看到这张图就蒙了,不要着急,我们慢慢来解释这张图。 此MR程序以wordcount为例 1、 数据准备:如图所示,在HDFS中有一个1G的文件...
2018-11-17 20:34:28
329
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅