排序:
默认
按更新时间
按访问量

hadoop集群在eclipse中运行mapreduce的一些问题

有一个问题,配置好了分布式集群后,把mapreduce程序打包成jar在命令行可以跑成功,得到结果;但是在eclipse中运行就会报错(class $map not found)就是说找不到map类。 最终问题原因及解决办法: 在项目src目录下导入core-site.xml,hdfs-sit...

2018-09-21 23:33:49

阅读数:18

评论数:0

java File类的常用方法

创建: createNewFile()在指定位置创建一个空文件,成功就返回true,如果已存在就不创建,然后返回false。 mkdir()  在指定位置创建一个单级文件夹。 mkdirs()  在指定位置创建一个多级文件夹。 renameTo(File dest)如果目标文件与源文件是在同一个路...

2018-09-21 22:22:24

阅读数:36

评论数:0

struts2的一些坑

启动tomcat报错:  严重: Exception starting filter struts2 java.lang.ClassNotFoundException: org.apache.struts2.dispatcher.ng.filter.StrutsPrepareAndExecut...

2018-07-26 16:42:50

阅读数:30

评论数:0

学习hibernate5.x的一些坑

hibernate5.x中buildServiceReguistry()方法使用方法 5版本导入更换为: import org.hibernate.boot.registry.StandardServiceRegistryBuilder; 在4版本中 Configuration conf = ...

2018-07-20 15:36:23

阅读数:91

评论数:0

JAVA JDBC使用mysql8.0.jar包连接数据库的小坑

喜欢用新不用久,所以我装软件基本都是遵循去下载安装最新版本的软件,毕竟新的软件功能多,虽然小坑和小问题也多,但是大部分坑你搜一搜网上都有前人给你填平了,这里记录一下自己学习JAVA JDBC连接数据库时的一个小问题 就是连接数据库驱动的时(使用了mysql-connector-java-8.0....

2018-06-07 15:53:01

阅读数:2398

评论数:2

MapReduce初级案例——数据去重

1.map与reduce中key与value有什么不同?2.shuffle的作用是什么?1、数据去重"数据去重"主要是为了掌握和利用并行化思想来对数据进行有意义的筛选。统计大数据集上的数据种类个数、从网站日志中计算访问地等这些看似庞杂的任务都会涉及数据去重。下面...

2018-04-24 21:01:00

阅读数:177

评论数:0

使用Eclipse编译运行MapReduce程序_Hadoop2.6.0_Ubuntu/CentOS

环境本教程在 Hadoop 2.6.0 下验证通过,适用于 Ubuntu/CentOS 系统,理论上可用于任何原生 Hadoop 2 版本,如 Hadoop 2.4.1,Hadoop 2.7.1。本教程主要测试环境:Ubuntu 14.04Hadoop 2.6.0(伪分布式)Eclipse 3.8...

2018-04-24 20:58:43

阅读数:67

评论数:0

Python3字符串的encode与decode研究——解决乱码的问题

2017/12/2 我开始写博客了,先从python学起,一步一个脚印,加油穆鸿继。   为什么Python使用过程中会出现各式各样的乱码问题,明明是中文字符却显示成“/xe4/xb8/xad/xe6/x96/x87”的形式?为什么会报错“UnicodeEncodeError: 'asci...

2017-12-02 15:27:10

阅读数:2310

评论数:1

提示
确定要删除当前文章?
取消 删除
关闭
关闭