Hadoop分布式系统框架
haha_mingg
这个作者很懒,什么都没留下…
展开
-
hadoop 0.20 程式開發
转载地址:http://trac.nchc.org.tw/cloud/wiki/Hadoop_Lab5hadoop 0.20 程式開發 eclipse plugin + Makefile零. 前言 ¶開發hadoop 需要用到許多的物件導向語法,包括繼承關係、介面類別,而且需要匯入正確的classpath,否則寫hadoop程式只是打字練習... 用類 vim 來處理這種複雜的程式,有可能會變成一場惡夢,因此用eclipse開發,搭配mapreduce-plugin會事半功倍。 若繼承練習一的系統,可以原创 2011-05-13 16:52:00 · 1053 阅读 · 1 评论 -
在Linux系统中配置Hadoop环境(1)---在虚拟机上安装Linux Ubuntu系统
<br /> 首先安装好虚拟机VMware,我机子上没有安装Linux操作系统。现在通过虚拟机来安装Linux系统。然后再下载ubuntu-10.04-desktop-i386.iso镜像文件。有了这个文件。我就可以在虚拟机上安装Linux ubuntu系统了。而该系统的版本号为:10.04.<br /> <br /> <br />安装过程比较简单。上图了。点击下图红笔画的图标,进行安装。<br /> <br /><br /> <br /> <br />先中该ubuntu-10.04-desktop-原创 2011-04-26 16:21:00 · 1337 阅读 · 1 评论 -
uBuntu Linux系统下面的常用命令
在第一次安装好Linux后,接着前一篇文章 。我们知道。我们设置了一个mingg用户,但是mingg用户并不能拥有所有权限。有时候我们希望使用root用户登陆。但第一次设置时root的密码不空,如何设置root的密码呢?我这里使用如下命令进行设置:1.Ubuntu安装后root是没有默认的密码的,因为你还没给root设置密码,,你第一个 user 是在 admin 组 ,所以他可以给 root 设置密码 , so ... sudo passwd root [sudo] password for yo原创 2011-04-26 22:19:00 · 1222 阅读 · 0 评论 -
在Ubuntu linux系统中安装Hadoop系统(一):单结点
<br />在前面的那篇文章中我已经介绍了安装在Ubuntu 系统中JDK,Hadoop。<br />下面我来进行配置Hadoop 系统。<br />1.首先在hadoop的conf文件夹下面找到core-site.xml文件:<br />添加如下配置至configuration标签之间:<br /> <property><br /> <name> fs.default.name</name><br /> <value>hdfs://localhost原创 2011-04-27 21:10:00 · 1104 阅读 · 0 评论 -
Hive学习笔记
1.创建表,并设置数据格式,以'|'进行分隔. create table hwz2(id int, name string ) partitioned by (ds string) row format delimited FIELDS TERMINATED BY '|'; 2.从本地插入数据 load data local inpath '/home/hadoop/software/h原创 2013-07-11 23:14:02 · 920 阅读 · 0 评论 -
sqoop学习笔记
1.下面是个从数据库导出表的数据到HDFS上文件的例子(-m 1 表示主键或序列化信息): sqoop import --connect jdbc:mysql://127.0.0.1:3306/hive --username root --password root --table customer -m 1 sqoop import --connect jdbc:mysql://原创 2013-07-11 23:15:50 · 1182 阅读 · 0 评论