- 博客(4)
- 资源 (22)
- 收藏
- 关注
原创 谈一谈ORCFile
从hive-0.11.0开始,有了ORCFile,下面是我的测试结果,测试用的是hive-0.12.0压缩很明显,默认使用ZLIB压缩很慢,只有一个map,改用SNAPPY后速度不错,压缩的也不错,就是目前还有bug,比如https://issues.apache.org/jira/browse/HIVE-5568参考资源:http://hortonworks.co
2013-11-21 16:46:37 4170
原创 ubuntu12.04全局代理
gsettings set org.gnome.system.proxy.socks host '127.0.0.1'gsettings set org.gnome.system.proxy.socks port 8087gsettings set org.gnome.system.proxy mode 'manual'# gsettings set org.gnome.syste
2013-11-03 08:06:36 1208
转载 Hive优化
Hive优化hive.optimize.cp=true:列裁剪hive.optimize.prunner:分区裁剪hive.limit.optimize.enable=true:优化LIMIT n语句hive.limit.row.max.size=1000000:hive.limit.optimize.limit.file=10:最大文件数1. 本地模式
2013-11-01 13:42:33 732
Kafka集成Spark Streaming并写入数据到HBase
2015-01-17
YARN Moving beyond MapReduce and Batch Processing with Apache Hadoop
2014-10-05
windows shell 脚本
2014-07-31
hadoop-2.3.0 的64位 native库
2014-03-03
MapReduce生成HFile入库到HBase 可能需要的jar包
2014-02-18
hadoop pdf
2013-10-25
滚动截屏_FSCapture
2012-09-21
S2S3H网上书店
2011-10-13
CGLIB2 is not available&org.objectweb.asm.Type
2011-06-07
Spring 3.0 需要的aspectj文件
2011-06-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人