![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
linux
vinking9393
乘风破浪会有时,直挂云帆济沧海
展开
-
hadoop实战-01.ubuntu安装jdk
linux小白,0基础,但为了学习一起其他的东西,不得不使用linux,在linux上安装jdk便是第一个。折腾了好久。1.下载jdk (这里需要注册账号才能下载)http://www.oracle.com/technetwork/java/javasebusiness/downloads/java-archive-downloads-javase6-419409.html#jdk-6...原创 2016-06-14 14:57:34 · 142 阅读 · 0 评论 -
hadoop实战-02.ubuntu 配置ssh免密码登录
下载安装ssh#sudo apt-get install openssh-server开启ssh服务#sudo /etc/init.d/ssh start查看服务是否正确启动#ps -e|grep ssh在当成目录生成一对公钥和私钥#ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa把公钥加到用于认证的公钥文件中,这里的au...原创 2016-06-15 16:30:13 · 182 阅读 · 0 评论 -
hadoop实战-03.ubuntu 14.0 安装hadoop 1.0.2
到官网下载 hadoop 1.0.2 ,解压放到想要的目录下:我这里是放在/home/vinking 下面#sudo tar xzfv hadoop-1.0.2.tar.gz 将解压的文件名改成hadoop 比较容易记 /home/vinking/hadoop 1.配置 hadoop-env.sh(Java 安装路径)#cd /home/vinking/hadoop...原创 2016-06-16 11:55:08 · 164 阅读 · 0 评论 -
hadoop实战-04.ubuntu配置伪分布式hadoop
配置伪分布模式1.配置xml文件:这里需要设定3个文件:core-site.xml hdfs-site.xml mapred-site.xml,都在/home/vinking/hadoop/conf目录下core-site.xml: Hadoop Core的配置项,例如HDFS和MapReduce常用的I/O设置等。hdfs-site.xml: Hadoop 守护进程的配置...原创 2016-06-16 16:28:28 · 128 阅读 · 0 评论 -
hadoop实战-05.配置hadoop小集群(3台主机)
配置3台主机hadoop小集群:将之前配置好的伪分布式的ubuntu虚拟机克隆多两份,一共三份因为3台机的配置是一样的,所以可以省去很多的安装,jdk,ssh,hadoop的安装为这3台机分配角色:ubuntu1 172.19.43.178 master,namenode,jobtracker-masterubuntu2 172.19.43.114 slave1,dat...原创 2016-06-17 16:25:22 · 180 阅读 · 0 评论 -
hadoop实战-06.ubuntu14.0安装hadoop 2.7.1( 3台主机) 小集群
之前配置的是1.0.2,这个版本较老了,所以升级成2.7.1了。大致上两个版本的配置差异不会太大。规划:ubuntu1 172.19.43.178 master,namenode,jobtracker-masterubuntu2 172.19.43.114 slave1,datanode,tasktracker-slave1ubuntu3 172,19.43.98 ...原创 2016-06-24 12:02:57 · 223 阅读 · 0 评论 -
hadoop实战-07.ubuntu14.04安装vsftpd服务
因为从总是要下载东西,虚拟机本身内存有限,所以考虑安装ftp服务,可以往虚拟机上上传文件。 #Ubuntu 安装 vsftpd 服务sudo apt-get updatesudo apt-get install vsftpd安装时老是提示没找到vsftp软件包, 改 gedit /etc/apt/sources.list 或vi /etc/apt/sources....原创 2016-07-17 20:52:05 · 83 阅读 · 0 评论