hadoop
文章平均质量分 74
尘一
这个作者很懒,什么都没留下…
展开
-
超详细图解ubuntu10.10下安装JDK
非常适合菜鸟的安装说明文档,留给刚刚接触linux的朋友一起分享! 版本:ubuntu10.10 jdk-6u23-i586.bin 1、假设你的jdk-6u23-i586.bin已经在桌面上,如图: 2、在/usr/local下建立java文件夹,如图: 3、将桌面...原创 2011-01-18 01:14:43 · 134 阅读 · 0 评论 -
hadoop初识--HelloHadoopV2
----------------------------说明------------------------------此程序比HelloHadoopV1增加了: 检查输出信息文件夹内是否存在输出文件并删除 input文件夹内的文件若大于两个,则文件不会被覆盖 map与reduce拆开,便于函数再利用------------------------------...2011-06-23 21:07:09 · 102 阅读 · 0 评论 -
HDFS操作之删除-CheckAndDelete
开始操作前,检查是否存在要删除的文件(/user/hadoop/program_put_input): package CheckAndDelete ;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileSystem;...原创 2011-06-23 18:41:56 · 806 阅读 · 0 评论 -
HDFS操作之下载-GetFromHdfs
接 http://freewxy.iteye.com/admin/blogs/1102759 ,检查hdfs上是否有/user/hadoop/input文件执行完毕后检查/home/hadoop/tmp/program_getFromHdfs_input文件是否生成 package GetFromHdfs;import java.io.IOException;...原创 2011-06-23 18:21:14 · 123 阅读 · 0 评论 -
HDFS操作之上传--PutToHDFS(从local上传资料到hdfs)
在local 端创建文件: /home/hadoop/tmp/program_get_input 程序执行完毕后检查hdfs 有无该文件: /user/hadoop/program_put_input package PutToHDFS;import java.io.IOException;import org.apache.hadoop...原创 2011-06-23 17:54:24 · 514 阅读 · 0 评论 -
hadoop初识--HelloHadoopV1
/** * HelloHadoop * 此程序用来了解Hadoop的<key,value>,并且练习hadoop api 编程 * * 测试方法: * 1、将该程序打包在hadoop0.21.0平台上;打成jar包,并将jar包拷贝到usr/local/hadoop(hadoop的安装目录)下 * 2、格式化namenode: * hadoop@wxy:/...原创 2011-06-23 11:07:45 · 127 阅读 · 0 评论 -
SSH 学习笔记
1、什么是ssh? SSH 为 Secure Shell 的缩写,由 IETF 的网络工作小组(Network Working Group)所制定;SSH 为建立在应用层和传输层基础上的安全协议。SSH 是目前较可靠,专为远程登录会话和其他网络服务提供安全性的协议。利用 SSH 协议可以有效防止远程管理过程中的信息泄露问题。2、安全外壳协议。 传统的网络服务程序,如...原创 2011-02-19 23:28:45 · 103 阅读 · 0 评论 -
云计算研究资料(感谢hadoopor大侠的分享)
本资料来自:http://www.hadoopor.com/ 有兴趣研究云计算的可以看看。 只有把云计算真正的应用起来,云才不是浮云!2011-05-26 22:30:03 · 103 阅读 · 0 评论 -
云计算课程资源(备份)
http://scl.cs.nmt.edu/~doshin/t/s09/cs589/index.htmlhttp://www.umiacs.umd.edu/~jimmylin/cloud-2008-Fall/index.htmlhttp://bishop.camp.clarkson.edu/wiki/en/EE694_21_-_Cloud_Computing_and_Hadoophtt...2011-05-22 21:28:04 · 199 阅读 · 0 评论 -
ubuntu10.10下eclipse3.5安装hadoop插件失败
进入 ./hadoop/mapred/contribs/eclipse-plugin目录下,将hadoop-0.21.0-eclipse-plugin.jar拷贝到你自己的eclipse/plugins目录下即可好吧,上面方法有些不灵光,之后我期盼的eclipse插件图标没出现。现在开始自己搞插件吧: 1、首先,如图,找到hadoop安装目录下的build-contrib.xml文件...2011-05-20 00:21:18 · 148 阅读 · 0 评论 -
hadoop单机版搭建图文详解
前置条件:1、ubuntu10.10安装成功(个人认为不必要花太多时间在系统安装上,我们不是为了装机而装机的)2、jdk安装成功(jdk1.6.0_23for linux版本,图解安装过程http://freewxy.iteye.com/blog/882784 )3、下载hhadoop0.21.0.tar.gz(http://apache.etoak.com//...原创 2011-05-03 16:24:02 · 254 阅读 · 0 评论 -
hadoop初识--HelloHadoopV3
----------------------------说明-----------------------------------HelloHadoopV3 此程序再次利用了HelloHadoopV2的map,reduce函数,并且自动将文件上传到hdfs上,并自动取回结果同时有提示信息,参数输入与打印运算时间的功能 测试方法: 将该程序运行在hadoop0.21.0...原创 2011-06-23 22:16:37 · 130 阅读 · 0 评论