ubuntu
vinking9393
乘风破浪会有时,直挂云帆济沧海
展开
-
hadoop实战-01.ubuntu安装jdk
linux小白,0基础,但为了学习一起其他的东西,不得不使用linux,在linux上安装jdk便是第一个。折腾了好久。 1.下载jdk (这里需要注册账号才能下载) http://www.oracle.com/technetwork/java/javasebusiness/downloads/java-archive-downloads-javase6-419409.html#jdk-6...原创 2016-06-14 14:57:34 · 138 阅读 · 0 评论 -
hadoop实战-02.ubuntu 配置ssh免密码登录
下载安装ssh #sudo apt-get install openssh-server 开启ssh服务 #sudo /etc/init.d/ssh start 查看服务是否正确启动 #ps -e|grep ssh 在当成目录生成一对公钥和私钥 #ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 把公钥加到用于认证的公钥文件中,这里的au...原创 2016-06-15 16:30:13 · 178 阅读 · 0 评论 -
hadoop实战-03.ubuntu 14.0 安装hadoop 1.0.2
到官网下载 hadoop 1.0.2 ,解压放到想要的目录下:我这里是放在/home/vinking 下面 #sudo tar xzfv hadoop-1.0.2.tar.gz 将解压的文件名改成hadoop 比较容易记 /home/vinking/hadoop 1.配置 hadoop-env.sh(Java 安装路径) #cd /home/vinking/hadoop ...原创 2016-06-16 11:55:08 · 160 阅读 · 0 评论 -
hadoop实战-04.ubuntu配置伪分布式hadoop
配置伪分布模式 1.配置xml文件: 这里需要设定3个文件:core-site.xml hdfs-site.xml mapred-site.xml,都在/home/vinking/hadoop/conf目录下 core-site.xml: Hadoop Core的配置项,例如HDFS和MapReduce常用的I/O设置等。 hdfs-site.xml: Hadoop 守护进程的配置...原创 2016-06-16 16:28:28 · 125 阅读 · 0 评论 -
hadoop实战-05.配置hadoop小集群(3台主机)
配置3台主机hadoop小集群: 将之前配置好的伪分布式的ubuntu虚拟机克隆多两份,一共三份 因为3台机的配置是一样的,所以可以省去很多的安装,jdk,ssh,hadoop的安装 为这3台机分配角色: ubuntu1 172.19.43.178 master,namenode,jobtracker-master ubuntu2 172.19.43.114 slave1,dat...原创 2016-06-17 16:25:22 · 177 阅读 · 0 评论 -
hadoop实战-06.ubuntu14.0安装hadoop 2.7.1( 3台主机) 小集群
之前配置的是1.0.2,这个版本较老了,所以升级成2.7.1了。 大致上两个版本的配置差异不会太大。 规划: ubuntu1 172.19.43.178 master,namenode,jobtracker-master ubuntu2 172.19.43.114 slave1,datanode,tasktracker-slave1 ubuntu3 172,19.43.98 ...原创 2016-06-24 12:02:57 · 219 阅读 · 0 评论 -
hadoop实战-07.ubuntu14.04安装vsftpd服务
因为从总是要下载东西,虚拟机本身内存有限,所以考虑安装ftp服务,可以往虚拟机上上传文件。 #Ubuntu 安装 vsftpd 服务 sudo apt-get update sudo apt-get install vsftpd 安装时老是提示没找到vsftp软件包, 改 gedit /etc/apt/sources.list 或vi /etc/apt/sources....原创 2016-07-17 20:52:05 · 78 阅读 · 0 评论