- 博客(3)
- 收藏
- 关注
转载 程序员爱写脚本是种病
如果你就是程序员,或者你熟悉程序员这个群体,有时候你会发现他们在干一些奇怪的事情。比如说,他们跟你说在写一个脚本,你问他写脚本干嘛?他告诉你,这事情重复做太无聊,写个脚本以后就不用老让我重复操作了。
2016-09-16 14:56:44 2617
转载 Hadoop、Hive、Spark 之间是什么关系?
早在大数据概念出现以前就存在了各种各样的关于数学、统计学、算法、编程语言的研究、讨论和实践。这个时代,算法以及各种数学知识作为建筑的原料(比如钢筋、砖块),编程语言作为粘合剂(比如水泥)构成了一座座小房子(比如一个应用程序),形成了一小片一小片的村庄(比如一台服务器)。
2016-09-15 22:31:34 11264 2
转载 Hadoop的局限和不足
但是,MapRecue存在以下局限,使用起来比较困难。 抽象层次低,需要手工编写代码来完成,使用上难以上手。只提供两个操作,Map和Reduce,表达力欠缺。一个Job只有Map和Reduce两个阶段(Phase),复杂的计算需要大量的Job完成,Job之间的依赖关系是由开发者自己管理的。
2016-09-15 22:28:52 2003
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人