关注
分享
有个机车梦
喜欢充满冒险的生活节奏 在代码中沉淀下浮躁的内心
展开
-
（Windows）IDEA上运行WordCount实例
注意： 在IDEA上运行WordCount实例之前我们要在本地Windows上配置Hadoop环境。Windows配置Hadoop环境 详情请看：https://blog.csdn.net/Yuz_99/article/details/90699413导入pom文件： <dependencies> <dependency> ...原创 2019-05-30 22:38:54 · 1904 阅读 · 0 评论 -
Windows上配置hadoop环境
引用至两个博主的文章:https://www.cnblogs.com/yifengjianbai/p/8258898.htmlhttps://blog.csdn.net/qq_35535690/article/details/819760321 安装1.下载hadoop2.5.2.tar.gz：https://pan.baidu.com/s/1dELEuNR2.下载hadooponwin...原创 2019-05-30 16:13:18 · 1766 阅读 · 0 评论 -
（Linux）Hadoop运行WordCount实例
1 hadoop文件上传和脚本提示：本人默认的Hadoop装在/usr/lib/hadoop 目录下.1 在hdfs上创建目录/inputhadoop fs -mkdir /input2 在本地创建目录/home/tempmkdir /home/yuz3 在目录/home/temp里面创建文本文件1.txt (自己添加内容即可)vim 1.txt4 将1.txt上传至hd...原创 2019-05-28 15:46:14 · 1144 阅读 · 0 评论 -
Mapreduce分析WordCount实例
1 介绍我们的txt文件内容是：atguigu atguiguss sscls clsjiaobanzhangxuehadoop期望输出的结果是:总体分析图为:2 Mapper首先写第一个Mapper，extends Mapper 查看默认值KEYIN: 输入数据的key ，行内偏移量 改成LongWritable（如果写成Object容易报错） 读取txt里...原创 2019-05-31 23:57:28 · 394 阅读 · 0 评论 -
Cannot delete Name node is in safe mode
删除文件的时候，提示我：Cannot delete Name node is in safe mode翻译过来：说明Hadoop的NameNode处在安全模式下。那什么是Hadoop的安全模式呢？在分布式文件系统启动的时候，开始的时候会有安全模式，当分布式文件系统处于安全模式的情况下，文件系统中的内容不允许修改也不允许删除，直到安全模式结束。安全模式主要是为了系统启动的时候检查各个Dat...原创 2019-06-01 19:27:28 · 2669 阅读 · 0 评论