2017年06月_架构师思考实践

07月 06月

原创 hive优化总结

1、列裁剪、分区裁剪只查询需要的字段和分区，不使用select* 2、join优化小表放左边 3、空值处理（1）NULL和数字相加的问题，为避免这种情况先nvl 或者coalesce 先处理（2）NULL 值关联时，可排除掉不参与关联，也可随机分散开避免倾斜 4. 排序优化不需要全局排序时，可用distribute by sort by 而不用

2017-06-11 11:48:22 969

原创一次hive reduce oom 处理：Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTas

问题： hive job失败，现象reduce失败，起了新的reduc而后还是失败，最终job失败错误： 2017-06-07 16:43:20 INFO Examining task ID: task_*** (and more) from job job_*** 2017-06-07 16:43:21 INFO FAILED: Execution Error, return code

2017-06-11 11:04:22 16486

swing 简介小例子

swing 简介小例子里面有一些小例子，学swing的可以看一下

2013-04-07

《MATLAB程序设计》中文版ppt教程有源代码

详细讲解了MATLAB，是ppt，想要搞数学建模的很有用。有源代码，很实用想要学的不要错过呀

2010-04-27

离散数学（左孝凌）课后习题答案很详细是计算机的基础课

离散数学（左孝凌）课后习题答案很详细是计算机的基础课课后习题理论分析

2010-02-03

简单的php入门，一些基础知识

一个简单的php入门，喜欢php的朋友们可以看看，一点简单点的基础

2009-06-16

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

原创 hive优化总结

原创 一次hive reduce oom 处理：Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTas

swing 简介 小例子

《MATLAB程序设计》中文版ppt教程 有源代码