自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

q79969786的专栏

  • 博客(4)
  • 资源 (22)
  • 收藏
  • 关注
全部文章> 2013年11月
排序：
按最后发布时间
按访问量
RSS订阅
11月 09月 08月 07月 02月

原创 我的Hive，Hadoop优化

直接上图，其中hive.merge.mapredfiles打算在执行必要的job是设置

2013-11-21 16:51:21 928

原创 谈一谈ORCFile

从hive-0.11.0开始，有了ORCFile,下面是我的测试结果，测试用的是hive-0.12.0 压缩很明显,默认使用ZLIB压缩很慢，只有一个map，改用SNAPPY后速度不错，压缩的也不错，就是目前还有bug，比如https://issues.apache.org/jira/browse/HIVE-5568 参考资源:http://hortonworks.co

2013-11-21 16:46:37 4169

原创 ubuntu12.04全局代理

gsettings set org.gnome.system.proxy.socks host '127.0.0.1' gsettings set org.gnome.system.proxy.socks port 8087 gsettings set org.gnome.system.proxy mode 'manual' # gsettings set org.gnome.syste

2013-11-03 08:06:36 1208

转载 Hive优化

Hive优化 hive.optimize.cp=true：列裁剪 hive.optimize.prunner：分区裁剪 hive.limit.optimize.enable=true：优化LIMIT n语句 hive.limit.row.max.size=1000000： hive.limit.optimize.limit.file=10：最大文件数 1. 本地模式

2013-11-01 13:42:33 730

Kafka集成Spark Streaming并写入数据到HBase
使用方法： 请使用eclipse的maven导入方式导入，代码在http://blog.csdn.net/q79969786/article/details/42793487有介绍

2015-01-17

YARN Moving beyond MapReduce and Batch Processing with Apache Hadoop
Apache Hadoop™ YARN Moving beyond MapReduce and Batch Processing with Apache Hadoop

2014-10-05

windows shell 脚本
可在windows上运行的几个shell脚本， 使用方法: 1.将下载的bin目录复制到C:\Program Files\Bitvise SSH Server\ 2.执行runAutoRun

2014-07-31

hadoop-2.3.0 的64位 native库
从apache官网下载的hadoop-2.3.0.tar.gz的native库是32位的，但是我们的机器一般是64位的操作系统，所以需要重新编译为64位的，附件就是我编译好的64位的native

2014-03-03

MapReduce生成HFile入库到HBase 可能需要的jar包
MapReduce生成HFile入库到HBase 可能需要的jar包，一共有3个 可以直接放在每台机器的${HADOOP_HOME}/lib下 hadoopHadoop 1.1.2 + hbase 0.94.6.1

2014-02-18

hadoop pdf
Hadoop in Action.pdf Hadoop Real World Solutions Cookbook.pdf mapreduce_design_patterns.pdf The.Definitive.Guide.3rd.Edition.pdf 四本书，全部英文版

2013-10-25

hadoop library
hadoop library

2012-10-13

滚动截屏_FSCapture
比较实用的抓图工具，选项比较多，界面人性化，可以录制屏幕！ 最重要的是可以滚动截屏，可以完美的截超出一个屏幕的内容。 解压 -> 双击FSCapture.exe，执行程序

2012-09-21

CentOS4.x安装oracle必须rpm
CentOS4.x安装oracle必须rpm

2012-03-26

Mybatis例子
使用的是mysql，里面有脚本。简单的增删改查等功能

2011-12-28

晓月小红伞综合工具箱
软件有说明， 下载好了按照说明做就可以了

2011-12-27

java读取xml
只需要修改里面的响应属性，就是一个不变应万变的方法，

2011-11-23

S2S3H网上书店
利用struts(struts-2.2.3.1)+hibernate(hibernate-distribution-3.6.4.Final)+spring(spring-framework-3.1.0.M2)+MySQL框架简单的编写了一个网上商城的小系统,作为熟悉3大最新框架流程之用，

2011-10-13

CGLIB2 is not available&org.objectweb.asm.Type
关于Cannot proxy target class because CGLIB2 is not available. Add CGLIB to the class path or specify proxy interfaces.和 java.lang.ClassNotFoundException: org.objectweb.asm.Type错误的解决方法: 就是加入cglib-nodep-2.2.2.jar包,如果加入cglib-2.2.2.jar包,就会报第二种错误

2011-06-07

C#简单音乐&视频播放器
C#做的播放器,实现简单的同步歌词,皮肤,两个窗体互相通信等功能,欢迎下载

2011-06-05

Spring 3.0 需要的aspectj文件
如果没有这些包,@Aspect的时候没有反应.这是进行spring-framework的AOP开发时需要的jar包，解压缩其中lib文件夹，lib文件夹中有4个重要的jar包：aspectjrt.jar，aspectjtools.jar，aspectjweaver.jar，org.aspectj.matcher.jar，解压缩后把这4个jar包导入到AOP项目中.

2011-06-05

C#做的定时关机源码
一个简单的定时关机软件 ，可以实现定时关机，也可以实现即时关机、注销、重启等功能，

2011-04-21

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除