Hadoop
smartDMer
研究方向:音视频技术
展开
-
Hadoop权威指南(第2版)--第1章
1.RAID和HDFS的区别 2.MapReduce编程模型:线性可伸缩,使用无共享框架,将问题分为独立的块,再进行并行计算。 3.Hadoop提供一个可靠的共享存储和分析系统,HDFS实现存储,而MapReduce实现分析处理。 4.磁盘寻址时间的提高远远慢于传输速率的提高。寻址是将磁头移动到磁盘位置进行读写操作的过程,它是导致磁盘操作延迟的主要原因,而传输速率取决于磁盘的带宽。 5.数原创 2012-04-04 18:38:34 · 579 阅读 · 0 评论 -
大数据从业者市场现状:薪酬持续增长 人才缺口巨大
http://cloud.csdn.net/a/20120405/2804236.html 大数据从业者市场现状:薪酬持续增长 人才缺口巨大 CSDN云计算频道 http://cloud.csdn.net/转载 2012-04-09 18:41:08 · 695 阅读 · 0 评论 -
Hadoop权威指南(第2版)--第2章
1.MapReduce编程模型:线性可伸缩,使用无共享框架,将问题分为独立的块,再进行并行计算。 MapReduce编程模型可用于数据处理,模型比较简单,但用于绽有用的程序并不简单。Hadoop可以运行由各种语言编写的MapReduce程序。 MapReduce程序本质上是并行运行的,优势在于处理大规模数据集。 2. MapReduce任务过程分为2个处理阶段:map阶段和reduce阶段。原创 2012-04-04 23:44:38 · 1174 阅读 · 0 评论 -
百度向业界分享海量数据处理技术
导语:我们身处海量数据时代。2011年,全球产生的数据量达到1.8ZB(1ZB=10亿TB,1TB=1000GB)。未来十年,全球大数据还将增加50倍。面对数据的暴增,如何有效的存储、管理、访问这些数据?互联网企业将如何应对大数据处理所带来的技术挑战? 海量数据处理技术,成就百度毫秒级搜索响应 中科院计算所副研究员查礼博士在沙龙上指出:百度毫秒级的搜索响应速度源于海量数据分析技术。大数据发展分转载 2012-04-14 00:02:04 · 738 阅读 · 0 评论