- 博客(6)
- 资源 (5)
- 收藏
- 关注
原创 关于继承Reducer类,内部方法分析
写自己的MyReducer类需要继承Reducer类。其中逻辑算术写在reduce()函数中,setup()函数在整个reducer中是靠前面执行的,且只执行一次。所以很多需要设计在输出前面的且不重复执行的可以写在setup()方法中。...
2018-07-24 17:03:38 671
原创 出错:/bin/bash: line 0: fg: no job control
问题:在windows的myeclipse上运行MapReduce在Linux的yarn上,会出现这个错误。4个配置文件已经配好,Linux上的集群和yarn也已经开启。原因:我是刚配置完mapred-site.xml文件中的mapreduce.framework.name值为yarn,集群上也修改了一些配置文件。解决:第二天使用Myeclipse就能直接使用,简单来说重启电脑。...
2018-07-24 17:01:16 1908
原创 在myeclipse中运行MR从http://localhost:8080/到http://master:8088/
问题:我把4个配置文件已经设置为在hdfs存储,在yarn上运行,但是打包driver类放到lib目录下,也添加到path中,集群也打开了,问题就是运行的时候显示job在localhost上运行。即The url to track the job: http://localhost:8080/ 没有: mapreduce.Job: The url to track the job: htt...
2018-07-23 23:06:02 1986
原创 提交MapReduce任务出错:unknown queue: default
报错:unknown queue: default原因:提交job作业,给application设置队列,如果没有设置队列,默认加载default队列,问题是学习配置任务队列的时候,我把参数设置order,phone,这样把之前root下默认的default给覆盖掉了。解决:在重新配置root下的队列中多加一个default用,隔开。错误截图:capacity-schedu...
2018-07-23 22:04:36 3785
原创 JAVA 常用框架和工具
JAVA 常用框架和工具集成开发工具(IDE):Eclipse、MyEclipse、Spring Tool Suite(STS)、Intellij IDEA、NetBeans、JBuilder、JCreatorJAVA服务器:tomcat、jboss、websphere、weblogic、resin、jetty、apusic、apache负载均衡:nginx、lvsweb层框架:Spring MV...
2018-07-15 09:30:39 818
原创 非常好用的刺客推荐
最近玩王者荣耀喜欢上玩一个刺客,这个刺客是兰陵王,它前期刷完一波野后立即升4级,抓人简直无解。杀人秘籍:1.开大隐身走到敌人附近,保证1和2技能都能打中,先放2技能再1技能眩晕,最后反向补大招,这样就算杀不死也能跑掉。如果能必定杀死先平A几刀,最后反向大。...
2018-07-15 09:26:01 236
Sqoop安装与使用
2018-06-21
kafka的安装和简单实例测试
2018-06-19
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人