2012年02月_iteye_9550

06月 05月 04月 02月 01月

对实时分析与离线分析的思考（二）

[size=medium] 接上一篇blog[url=http://langyu.iteye.com/blog/1404577]对实时分析与离线分析的思考[/url] 昨天看了S4与Storm的设计，再结合之前对Microsoft的Dryad的了解，感觉有些共性是需要明确的。在MapReduce这种“分裂－合并”模型出世之前，我们都采用“一层计算...

2012-02-15 14:20:13 372

把买硬盘的钱省下来吧...

[size=medium] 这几天看到一篇文章说，到2020年，全球的数据使用量预计将达到35ZB，也就是近400亿个1T硬盘的总量。这还不把我们低效的硬盘利用率计算在内。我也Google了下，今年全球硬盘预计总出货量才8亿块。同时Facebook说用户平均每天上传近2.5亿张照片... 呵呵，这个世界太疯狂，硬盘生产得有多大的增长幅度才能满足这么多宅男宅女的需求呢？ ...

2012-02-15 11:07:36 141

对实时分析与离线分析的思考

[size=medium] 数据的价值是有时效性的，越早分析越能得到更快的问题反馈或响应。Hadoop的设计初衷是存储与分析离线大数据，我认为它的缺点就是不能及时地利用数据中所蕴含的深层价值。在做深入分析之前，我想从门外汉的角度来说说我自己理解的实时分析是什么样子的。它的目标很明确：尽快地从数据中挖掘出有用的内容来。这牵扯到把计算移动到哪个地方去的问题。数据源本地？数据传...

2012-02-13 16:06:42 1485

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人