![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
smartDMer
研究方向:音视频技术
展开
-
Hadoop权威指南(第2版)--第1章
1.RAID和HDFS的区别2.MapReduce编程模型:线性可伸缩,使用无共享框架,将问题分为独立的块,再进行并行计算。3.Hadoop提供一个可靠的共享存储和分析系统,HDFS实现存储,而MapReduce实现分析处理。4.磁盘寻址时间的提高远远慢于传输速率的提高。寻址是将磁头移动到磁盘位置进行读写操作的过程,它是导致磁盘操作延迟的主要原因,而传输速率取决于磁盘的带宽。5.数原创 2012-04-04 18:38:34 · 573 阅读 · 0 评论 -
大数据从业者市场现状:薪酬持续增长 人才缺口巨大
http://cloud.csdn.net/a/20120405/2804236.html大数据从业者市场现状:薪酬持续增长 人才缺口巨大 CSDN云计算频道http://cloud.csdn.net/转载 2012-04-09 18:41:08 · 691 阅读 · 0 评论 -
Hadoop权威指南(第2版)--第2章
1.MapReduce编程模型:线性可伸缩,使用无共享框架,将问题分为独立的块,再进行并行计算。MapReduce编程模型可用于数据处理,模型比较简单,但用于绽有用的程序并不简单。Hadoop可以运行由各种语言编写的MapReduce程序。MapReduce程序本质上是并行运行的,优势在于处理大规模数据集。2. MapReduce任务过程分为2个处理阶段:map阶段和reduce阶段。原创 2012-04-04 23:44:38 · 1172 阅读 · 0 评论 -
百度向业界分享海量数据处理技术
导语:我们身处海量数据时代。2011年,全球产生的数据量达到1.8ZB(1ZB=10亿TB,1TB=1000GB)。未来十年,全球大数据还将增加50倍。面对数据的暴增,如何有效的存储、管理、访问这些数据?互联网企业将如何应对大数据处理所带来的技术挑战?海量数据处理技术,成就百度毫秒级搜索响应中科院计算所副研究员查礼博士在沙龙上指出:百度毫秒级的搜索响应速度源于海量数据分析技术。大数据发展分转载 2012-04-14 00:02:04 · 733 阅读 · 0 评论