hadoop
Bruce_Json
这个作者很懒,什么都没留下…
展开
-
hadoop伪分布式下无法启动NameNode或者DataNode的问题的解决方法
哪个启动不起来就查看哪个的日志,查看日志里哪个地方出错针对解决,网上有很多方法,要注意看是不是和自己情况一样。namenode无法启动的情况:进入logs目录,查看namenoded的日志看了日志发现配置8088端口后面多个空格 datanode无法启动启动的情况:进入logs目录,查看datanoded的日志查看以后发现是配置50070的地方有错删除...原创 2018-11-02 13:35:15 · 3560 阅读 · 0 评论 -
HDFS Explorer无法上传文件的问题
错误情况解决办法此路径下找到hosts文件C:\Windows\System32\drivers\etc修改hosts文件,添加ip地址保持就ok了192.168.255.128 centos原创 2018-11-05 11:37:43 · 1473 阅读 · 0 评论 -
Hadoop基础
原创 2018-10-30 23:18:02 · 97 阅读 · 0 评论 -
非常好的java和大数据相关学习网站
http://www.apachecn.org/原创 2018-10-30 22:41:59 · 231 阅读 · 0 评论 -
Hadoop安装和配置
一、安装将Hadoop安装包上传到/usr/local目录下解压cd /usr/local/tar -zxvf hadoop-2.6.0.tar.gz目录说明:bin 执行文件目录 etc Hadoop 配置文件都在此目录 include 包含 C 语言接口开发所需头文件 lib 包含 C 语言接口开发所需链接库文件 libexec 运行 sbin 目录中的脚本会...原创 2018-11-05 16:31:49 · 228 阅读 · 0 评论 -
HDFS java接口——实现目录增删文件读写
1、在Idea中,创建maven项目,选择org.apache.maven.archetype:maven-archetype-quickstart,创建一个普通的Java项目(archetypeCatalog:internal),默认会创建 App 类。2、添加依赖 <!-- https://mvnrepository.com/artifact/org.apache.h...原创 2018-11-05 17:12:25 · 401 阅读 · 0 评论 -
MapReduce——WordCount
添加依赖 <dependency> <groupId>org.apache.hadoop</groupId> <artifactId>hadoop-common</artifactId> <version>2.6.0</version> </de原创 2018-11-05 17:20:36 · 126 阅读 · 0 评论 -
MapReduce——单元测试
添加依赖 <dependency> <groupId>org.apache.mrunit</groupId> <artifactId>mrunit</artifactId> <version>1.1.0</version> <scope&am原创 2018-11-05 17:22:14 · 534 阅读 · 0 评论