自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

黄刚的技术博客

每天进步一点点,自我实现

  • 博客(3)
  • 资源 (2)
  • 收藏
  • 关注

转载 大数据环境下互联网行业数据仓库/数据平台的架构之漫谈

导读:整体架构数据采集数据存储与分析数据共享数据应用实时计算任务调度与监控元数据管理总结一直想整理一下这块内容,既然是漫谈,就想起什么说什么吧。我一直是在互联网行业,就以互联网行业来说。先大概列一下互联网行业数据仓库、数据平台的用途:整合公司所有业务数据,建立统一的数据中心;提供各种报表,有给高层的,有给各个业务的;为网站运营提供运营上的数据支持,就是通过数据,让运

2016-05-08 18:53:37 6907 1

转载 浅谈开源大数据平台的演变

一说到开源大数据处理平台,就不得不说此领域的开山鼻祖Hadoop,它是GFS和MapReduce的开源实现。虽然在此之前有很多类似的分布式存储和计算平台,但真正能实现工业级应用、降低使用门槛、带动业界大规模部署的就是Hadoop。得益于MapReduce框架的易用性和容错性, 以及同时包含存储系统和计算系统,使得Hadoop成为大数据处理平台的基石之一。Hadoop能够满足大部分的离线存储和离

2016-05-08 18:52:14 529

原创 编写dynamodb基于GSI的分页查询

主表结构(offline-archive.201604)msgid(主分区键,字符串), msg(字符串), topic(字符串), ts(long型时间戳)GSI二级索引(topic-ts-index)项目键(topic)排序键(ts)

2016-05-04 11:12:27 2968

sigar 本地库依赖

sigar 本地库依赖

2014-08-09

Ambari安装与使用

Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用Ambari安装与使用

2014-02-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除