- 博客(7)
- 资源 (2)
- 收藏
- 关注
RSS订阅转载 Win7 eclipse Hadoop Failed to set permissions of path
背景：win7下用eclipse远程连接linux里的hadoop调试开发 12/04/24 15:32:44 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 12/04/24 1
2012-05-30 18:18:07
1580
1
转载 Hadoop MapReduce进阶 使用DataJoin包实现Join
概念： Hadoop有一个叫DataJoin的包为Data Join提供相应的框架。它的Jar包存在于contrib/datajoin/hadoop-*-datajoin。 为区别于其他的data join技术，我们称其为reduce-side join。（因为我们在reducer上作大多数的工作） reduce-side join引入了一些术语及概念：
2012-05-30 16:50:16
805
转载 OpenStack简介和相关资料
最近2个星期在尝试用OpenStack搭建私有云，提供方便的虚拟机部署和管理。写一篇博客记录一下相关资料。 1. OpenStack简介 OpenStack是一个开源软件，它提供了一个部署云的平台。为虚拟计算或存储服务的公有/私有云，提供可扩展的、灵活的云计算。 OpenStack包含了一组由社区维护的开源项目，主要项目有Compute（Nova）， Object Storage
2012-05-24 11:11:01
657
转载 Hadoop和OpenStack对象存储有何不同？
最近在Quora上有人提到一个问题，有关Hadoop分布式文件系统和OpenStack对象存储的不同。 问题原文如下： “HDFS (Hadoop分布式文件系统)和OpenStack对象存储(OpenStack Object Storage)似乎都有着相似的目的：实现冗余、快速、联网的存储。什么样的技术特性让这两种系统因而不一样?这两种存储系统最终趋于融合是否大有意义?” 问题提出之后，很快
2012-05-23 22:18:41
962
转载 UML用例图
最近准备好好学习一下uml，之前做过一些这方面的设计，但都没有太深入的研究，现在想写一系统的教程，也算是对uml的学习做下总结吧，做了好久的开发，也想在设计方面下下功夫了。 今天还是主要来说说uml的用例图 用例图包含六个元素，分别是：执行者(Actor)、用例(Use Case)、关联关系(Association)、包含关系(Include)、扩展关系(Extend)以及泛化关系
2012-05-13 13:44:59
487
转载 MapReduce框架中矩阵相乘的算法思路及其实现
关于在mapreduce框架中的两个矩阵相乘（A*B）的算法实现，有如下两种思路。。 第一，因为我们在学校课堂内的矩阵相乘的基本算法就是A的行与B的列相乘 当然要满足A的列的维数与B的行维数相同，才能满足相乘的条件。所以有如下基本思路： 让每个map任务计算A的一行乘以B的一列，最后由reduce进行求和输出。这是最原始的实现方法： 假设A(m*n) B(n*s) map的输入的格
2012-05-06 22:11:02
1704
2
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人