- 博客(3)
- 资源 (2)
- 收藏
- 关注
原创 Hadoop Job History解析——perl脚本
通过解析job history日志和job config文件可以获得Job的具体运行情况,包括job的配置信息、运行状态及task、Attempt的运行状态和相应的counter。脚本如下:parseJobHistory.pluse File::Basename;use XML::Simple;use Data::Dumper;if (!defined($ARGV[0]) or $
2012-12-23 14:31:15 2707
原创 hive 自定义UDF UDAF UDTF
UDF步骤:1.继承org.apache.hadoop.hive.ql.exec.UDF2.实现evaluate函数,evaluate函数支持重载package cn.sina.stat.hive.udf;import java.util.Arrays;import org.apache.hadoop.hive.ql.exec.UDF;public final class S
2012-12-19 18:36:34 6745
原创 HIVE体系架构
*注:本文基于hive-0.8.1写的架构图:一、 service1、 hive有三种service,分别是cli,hiveserver和hwi。2、 cli是命令行工具,为默认服务,启动方式$HIVE_HOME/bin/hive 或 $HIVE_HOME/bin/hive --service cli。3、 hiverse
2012-12-18 16:17:47 10100
MYSQL DBA 必读 understanding mysql internals
2009-05-11
LiveValidation很好用的js表单验证
2008-11-07
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人