Hadoop
Yaoyaminaco
吃得起苦~
展开
-
Hadoop安装手记
前期准备:① ubuntu:YlmF-Linux-Y1.5.iso(ubuntu 9.10)② JDK:jdk-6u25-linux-i586.bin③ 虚拟机软件:vmworkstation ④ hadoop-0.20.2⑤ samba(自动更新)1 VM和ubuntu 9.10的安装和配置1.1 VMtools可装可不装1.2 实现2台虚拟机互pin原创 2011-12-19 17:59:46 · 139 阅读 · 0 评论 -
Apache Mahout的Taste基于Hadoop实现协同过滤推荐引擎的代码分析
Taste 是 Apache Mahout 提供的一个协同过滤算法的高效实现,它是一个基于Java实现的可扩展的高效的推荐引擎。该推荐引擎是用这样简单的数据格式表达用户对物品的偏好。以此为输入数据,计算后就可以得到为每个user推荐的items列表。他提供了方便的单机版的编程接口,也提供了基于hadoop的分布式的实现。单机版的编程接口主要适用于写demo和做算法的评估,若处理转载 2012-02-06 19:06:15 · 170 阅读 · 0 评论 -
Amazon Spot 实例官方说明文档
Amazon EC2 Spot实例Spot实例是一种新的Amazon EC2消费实例。该种实例允许用户对未使用的Amazon EC2能力进行竞价,并且只要竞价超过了当前的Spot价格,就可以一直使用。Spot价格根绝供需周期性地变更,用户的价格若在周期内再次超过定价则会可以重新访问可用的Spot实例。Spot实例提供了另一种获得计算能力的选择,是On-Demand实例和Reserved实例的补翻译 2012-05-14 14:47:23 · 1328 阅读 · 0 评论 -
Ubuntu11.10-desktop-amd64搭建Hadoop-1.0.3常见问题总结
1. SSH无密码登录配置SSH,首先需要安装3个依赖软件包:$ sudo apt-get install ssh openssh-server openssh-client确认安装完毕则需要:$ ssh localhost若提示你需要输入passphrass则说明安装成功,已经完成了有密码登录。查阅hadoop-1.0.3的官方文档,得知安装步骤大致为:原创 2012-06-07 09:14:19 · 114 阅读 · 0 评论 -
eclipse3.7.2配置hadoop1.0.3插件
1. 安装插件准备程序:eclipse-3.7.2hadoop-1.0.3-eclipse-plugin.jar将hadoop-1.0.3-eclipse-plugin.jar 复制到eclipse/plugins目录下,重启eclipse。2. 打开MapReduce视图Window -> Open Perspective -> Other 选择Map原创 2012-06-12 11:42:34 · 1188 阅读 · 3 评论 -
eclipse3.7.3整合mahout源码报错“error: ConnectionPoolDataSource is not abstract and...”
纠结了1整天,才发现是jdk1.7.0的问题,遂把jdk改回了1.6.0_33问题即可解决。还有,用maven编译mahout时记得掠过TESTs环节:$ mvn install -Dmaven.test.skip=true原创 2012-06-13 22:30:24 · 791 阅读 · 0 评论