2015年12月_小虾米有鲨鱼梦

12月 10月 09月 08月 07月 05月 04月 03月 02月 01月

转载 Hadoop map调优参数

参数：io.sort.mb（default 100）当map task开始运算，并产生中间数据时，其产生的中间结果并非直接就简单的写入磁盘。而是会利用到了内存buffer来进行已经产生的部分结果的缓存，并在内存buffer中进行一些预排序来优化整个map的性能。每一个map都会对应存在一个内存buffer,map会将已经产生的部分结果先写入到该buffer中，这个buffer默认

2015-12-26 20:13:20 1227

原创 Mahout In Action中ItemCFHadoop流程图

见图

2015-12-26 15:24:40 714

转载一共81个，开源大数据处理工具汇总

原文出处： 36大数据：一共81个，开源大数据处理工具汇总（上） 36大数据：一共81个，开源大数据处理工具汇总（下），包括日志收集系统/集群管理/RPC等第一部分查询引擎一、Phoenix贡献者：：Salesforce简介：这是一个Java中间层，可以让开发者在Apache HBase上执行SQL查询。Phoenix完全使用Java编写，代码位于GitHub上，并且提供了一个客户端可嵌入的JD

2015-12-24 15:14:32 3624

原创 MapReduce框架中Key-Value对象的重用

从代码看问题@Override protected void reduce(Text key, Iterable<Text> values,Context context) throws IOException, InterruptedException { List<Text> list =new ArrayList<Stri

2015-12-24 14:50:09 2228

原创 MapReduce输入输出类型对应关系

如图Mapper的输出类型要和Combiner的输入类型对应； Combiner的输出类型要和Reducer的输入类型对应； Mapper的输出类型要和Reducer的输入类型对应；如果没有单独设置Mapper的输出类型，则和Reducer一样都受如下配置信息控制。 job.setOutputKeyClass(Text.class); job.setOutput

2015-12-08 09:56:29 901

Android模拟时钟

2016-05-26

SlideLeftDelete

利用HorizonScrollView实现的左滑删除

2015-07-24

WaveAnimLayoutProject

一个特殊的Layout，可以将其中容纳的子元素以波纹动画的形式消失，显示出layout的背景。这里主要用到了PorterDuffXfermode混合模式。在需要绘制动画的时候，先将canvas离屏缓存，然后绘制子元素，接着设置画笔的混合模式，再绘制一个透明的圆，最后恢复canvas。这里用Runnable实现动画。

2015-03-24

njupt拨号客户端

南邮校园无线网NJUPT拨号客户端,手机连上wifi，打开本软件点击登录就可以畅游互联网。

2015-03-05

那一天（纪念日管理工具）

一个简单易用的重要日期管理工具，可以设定重复提醒，再也不用担心记不住女票的生日或者和女票的纪念日啦

2015-03-05

HibernateDemo

最简单的Hibernate项目，初学Hibernate的人可以看看。

2015-01-06

利用MediaPlayer和SurfaceView播放视频

用MediaPlayer和SurfaceView写的视频播放器，利用系统自带的编解码功能，具备播放、暂停、停止功能，支持旋转屏幕，在发生屏幕旋转、Activity切换等事件之后，能记住之前的播放状态和播放进度，界面比较简单，仅供学习之用。

2014-10-27

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人