- 博客(3)
- 收藏
- 关注
原创 hive执行语句oom
新安装HIVE执行语句时可能会出现的错误 GC overhead limit exceeded和Java heap space java参数 set mapreduce.map.java.opts=-Xmx2048m -XX:-UseGCOverheadLimit set mapreduce.reduce.java.opts=-Xmx4096m; set mapreduce.map.me
2017-06-13 10:33:34 2625 1
转载 一句话说明策略模式
策略模式是一种定义一系列算法的方法,从概念上讲,所有这些算法完成的都是相同的工作,只是实现不同。它可以以相同的方式调用所有的算法,减少了各种算法使用算法类的耦合。 策略模式的Strategy类层次为Context定义了一系列可供重用的算法或者行为,继承有助于析取出这些这些算法的公共功能。 策略模式的有点事简化的单元测试,因为每个算法都有自己的类,可以通过自己的接口单独测试 当不同的行为堆砌在
2017-04-28 11:56:51 435 1
原创 Mapreduce中分布式缓存的使用注意点
job.addArchiveToClassPath(archive); // 缓存jar包到task运行节点的classpath中 job.addFileToClassPath(file); // 缓存普通文件到task运行节点的classpath中 job.addCacheArchive(uri); // 缓存压缩包文件到task运行节点的工作目录 job.addCache
2017-01-22 14:42:57 3559 1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人