![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
qq_43073985
这个作者很懒,什么都没留下…
展开
-
配置hadoop临时目录
1.配置[core-site.xml]文件fs.defaultFShdfs://s201/hadoop.tmp.dir/home/centos/hadoop//以下属性均由hadoop.tmp.dir决定,在hdfs-site.xml文件中配置。dfs.namenode.name.dir=file://${hadoop.tmp.dir}/dfs/namedfs.data...原创 2020-03-23 10:40:42 · 616 阅读 · 0 评论 -
准备完全分布式主机的ssh
1.删除所有主机上的/home/centos/.ssh/*2.在s201主机上生成密钥对 $>ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa3.将s201的公钥文件id_rsa.pub远程复制到202 ~ 204主机上。 并放置/home/centos/.ssh/authorized_keys $>scp id_rsa.pub root...原创 2020-02-07 22:07:46 · 147 阅读 · 0 评论 -
启动hadoop伪分布模式
1.创建三个配置目录,内容等同于hadoop目录${hadoop_home}/etc/local${hadoop_home}/etc/pesudo${hadoop_home}/etc/full2.创建符号连接 $>ln -s 3.对hdfs进行格式化 $>hadoop namenode -format 出现未知的主机名的问题 解决: $hostname查看主机名称...原创 2020-02-05 10:30:03 · 248 阅读 · 0 评论 -
hadoop配置独立模式,伪分布模式,完全分布模式
1.standalone(local)nothing !不需要启用单独的hadoop进程。2.Pseudodistributed mode 伪分布模式。 a)进入${HADOOP_HOME}/etc/hadoop目录 b)编辑core-site.xml <?xml version="1.0"?> <configuration> <proper...原创 2020-02-04 15:01:18 · 333 阅读 · 0 评论