![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop安装
知己比邻
这个作者很懒,什么都没留下…
展开
-
欢迎使用CSDN-markdown编辑器
java.io.IOException: Cannot create directory /usr/local/hadoop/hdfs/name/current at org.apache.hadoop.hdfs.server.common.StorageStorageDirectory.clearDirectory(Storage.java:337)atorg.apache.hadoop转载 2017-11-22 17:22:11 · 114 阅读 · 0 评论 -
hadoop中分布式安装zookeeper
1)首先先把主机名的映射进行配置172.21.70.30 ubuntu01172.21.70.31 ubuntu02172.21.70.32 ubuntu03172.21.70.33 ubuntu04172.21.70.34 ubuntu05或者在配置时使用主机的ip代替2)zookeeper解压后的文件在里面找到conf/zoo.cfg原创 2017-11-23 15:48:41 · 180 阅读 · 0 评论 -
集群管理
ubuntu06 (mysql数据库安装密码忘了) flumeUbuntu05 hive worker(spark)ubuntu01 hbaseubutnu04 ubuntu05 namenodeubuntu01 ubuntu02 ubuntu03 ubuntu06 datanodeubuntu01 ubuntu02 ubuntu03 ubuntu06 nodemanage...原创 2018-01-11 11:31:20 · 264 阅读 · 0 评论 -
For input string: " "
For input string: ""在使用mapreduce进行二次排序时,运行mapreduce是发现出现 For input string: ""错误最后发现错误是因为输入的数字多了空格4 5 4 5最后将要排序的数字进行从新书写就可以了4 54 5...原创 2018-03-11 19:55:51 · 19869 阅读 · 1 评论 -
在windows上写Mapreduce遇到的坑
初步判断是缺少关于yarn的jar包这是nativeIO的错误,里面的609行的renturn true;就可以了并新建一个NativeIO类复制进去,并修改,就可以了,在通过linux客户端,发现hadoop fs -ls指向的目录为本地目录,这样的错误为defaultFS没有指定,误删core-site.xml。...原创 2018-04-14 19:19:59 · 369 阅读 · 0 评论 -
hadoop分布式安装
1)进行root密码的修改 sudo passwd root 2) 进行节点的分配节点名 安装的软件 运行的进程Ubuntu01 jdk、hadoop、spark_master ...原创 2018-07-23 15:18:28 · 146 阅读 · 0 评论