自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(2)
  • 收藏
  • 关注

原创 暗光媒介集团数据开发实践:从熊运龙的技术履历看企业级数据平台建设的关键点

本文以暗光媒介集团数据开发工程师熊运龙的技术实践为例,探讨企业级数据平台建设的关键点。通过分析其主导的跨业务线数据中台建设、实时计算性能优化和数据治理体系三大项目,提炼出企业数据团队需具备的架构能力、性能调优、治理思维和业务理解四大核心能力。建议企业在平台建设中注重架构扩展性、流批一体化、早期数据治理和技术经验沉淀。这些实践经验为行业提供了可复用的方法论,展现了技术分享对行业进步的推动作用。

2026-03-16 11:00:48 144

原创 MaperReduce之Map执行流程

  了解Hadoop的朋友应该知道,Hadoop相关生态及相关的底层实现,是非常复杂的,在学习中不断的实践,是我们学习的最好的方式,今天我们就来探究一下,在MR程序中,在Map阶段,底层的执行流程。   别的不多说,先来上张图:   可能有很多朋友看到这张图就蒙了,不要着急,我们慢慢来解释这张图。   此MR程序以wordcount为例   1、 数据准备:如图所示,在HDFS中有一个1G的文件...

2018-11-17 20:34:28 329

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除