- 博客(6)
- 收藏
- 关注
转载 本地运行mapreduce报错记录
wordcount在本地运行报错解决:Exception in thread "main" java.lang.UnsatisfiedLinkError:org.apache.hadoop.io.native.NativeID$Windows.access在windows中的intellij中运行wordcount程序,控制台输出以下报错在Intellij编辑器中解决办法:本地重新创建NativeIO类,修改一个方法返回值,然后用新建的NativeIO类覆盖源码中的NativeIO类。下面会展示
2020-06-23 00:06:08 285
原创 java操作hdfs常见的方法
package com.test.hdfsclint;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.*;import org.apache.hadoop.io.IOUtils;import org.junit.After;import org.junit.Before;import org.junit.Test;import sun.nio.ch.IOUtil;import java.io.
2020-06-13 15:53:37 213
转载 idea设置自带的maven为国内镜像
idea设置自带的maven为国内镜像版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。本文链接:https://blog.csdn.net/panchang199266/article/details/80307357第一步:找到idea中maven中的“settings.xml”位置一般在idea安装目录下的“D:\IntelliJ IDEA 2017.2.5\plugins\maven\lib\maven3\conf”(参照左面地址)第二
2020-06-11 17:09:33 633
原创 hadoop配置历史服务器和日志服务器
历史服务器和日志服务器配置历史服务器配置日志服务器配置历史服务器进入/opt/hadoop-2.7.7/etc/hadoop/mapred-site.xml,增加如下配置<!-- 历史服务器端地址 --><property><name>mapreduce.jobhistory.address</name><value>hadoop100:10020</value></property><!-- 历史服务
2020-06-09 19:32:25 470
原创 hadoop伪分布式配置
hadoop伪分布式配置集群启动集群测试伪分布式配置集群1.配置/opt/hadoop-2.7.7/etc/hadoop/core-site.xml文件<!-- 指定HDFS中NameNode的地址 --><property><name>fs.defaultFS</name> <value>hdfs://hadoop101:9000</value></property><!-- 指定Hadoop
2020-06-02 21:52:15 218
原创 hadoop学习-虚拟机环境搭建
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入欢迎使用Markdown编辑器加粗样式你好! 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何
2020-06-01 22:25:02 168
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人