qq_42109746的博客

终于进军Hadoop了..............................一、下载Hadoop我这里下载的是2.7.7版本的，可以使用以下网址进行下载，或者自行到Hadoop的官网自行下载其他版本的压缩包。http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar...

当我们部署分布式环境时，一般来说需要对多台主机设置别名，我们这里采用命令行的方式对主机名进行修改。一、查看当前主机名：hostname可以看到我现在的主机名是Eric.com二、设置临时主机名(不演示)：hostname eric100三、设置永久生效的主机名：hostnamectl set-hostname eric100现在可以看...

安装open-jdk后发现jps不能用，此时需要安装另外一个包才能使用通过以下命令进行安装：sudo yum install java-1.8.0-openjdk-devel.x86_64安装成功之后，我们可以发现jps命令已经起效了。...

一、引言当我们启动Hadoop的时候，每启动一个节点就需要我们输入一次密码，但如果有很多台机器一起在跑，可能会多达几百几千个节点，很明显如果在生产环境中，这种操作绝对是不可取的。这个时候就需要我们对Hadoop进行SSH免密登录配置。二、原理Hadoop在启动节点的时候，其实都是系统内部在进行SSH登录，而每次进行SSH登录，就会需要我们用密码进行授权。这样解决办法就很简单了，我们只需...

本篇文章主要讲述Hadoop下hdfs的Java客户端操作，服务器端系统为Centos7，客户端系统为Windows，实现文件的上传，下载，创建，删除，查看功能。一、启动HDFS在Centos下启动hdfs,我这里直接启动全部节点。start-all.sh查看所需节点是否已启动jps如以上节点在运行，则说明启动成功。二、创建项目并引入hdfs依赖...