- 博客(10)
- 资源 (66)
- 收藏
- 关注
转载 android google map v2
Google android map v2 是一个比较大的变化,之前(大概多久以前,我就没有追究了)google地图应用方面,一直都是用Google Map Andorid API v1来做的,最近想搞一个地图方面的应用,想要应用Google map 首先要申请一个google map key应用google map,而申请google map v1地址好像是没有了,网上那些提供的地址不能连接
2014-05-24 21:28:14 709
原创 开发Android Map程序 如何获取 apikey (Google Map API v2)
1. 在Eclise --> preference --> android --> bulid 能够看到缺省的debug keystore;注意,最新版本的Android Eclipse中无需再自己产生MD5 和 SHA1 2. 登录Google网站账户后转到如下网址 https://console.developers.google.com/project/apps~so
2014-05-24 19:46:48 706
转载 学会定制MapReduce里的partition,sort和grouping,Secondary Sort Made Easy
通过初期的几个开发员培训班,我发现有不少学员容易“偏爱”缺省的MapReduce行为,而忽略如何在代码里根据自己应用的需要来定制不同于系统缺省的行为。这篇文章结合Secondary Sort来介绍“Shuffle & Sort”里涉及到的三个重要操作。 缺省情况下,MapReduce Framework的Shuffle & Sort过程将所有和某一个键相关联的值“组合”(group)在一
2014-05-20 08:59:11 504
转载 hadoop中的Partitioner分区
hadoop的map/reduce中支持对key进行分区,从而让map出来的数据均匀分布在reduce上,当然,有时候由于机器间配置问题,可能不需要数据均匀,这时候也能派上用场。 框架自带了一个默认的分区类,HashPartitioner,先看看这个类,就知道怎么自定义key分区了。 public class HashPartitioner extends Partitioner {
2014-05-20 08:58:10 399
转载 Hadoop中Partition解析
Map的结果,会通过partition分发到Reducer上,Reducer做完Reduce操作后,通过OutputFormat,进行输出,下面我们就来分析参与这个过程的类。 Mapper的结果,可能送到Combiner做合并,Combiner在系统中并没有自己的基类,而是用Reducer作为Combiner的基类,他们对外的功能是一样的,只是使用的位置和使用时的上下文不太一样而已。Mapp
2014-05-20 08:50:05 413
转载 MapReduce 过程详解
Hadoop 越来越火, 围绕Hadoop的子项目更是增长迅速, 光Apache官网上列出来的就十几个, 但是万变不离其宗, 大部分项目都是基于Hadoop common MapReduce 更是核心中的核心。那么到底什么是MapReduce, 它具体是怎么工作的呢? 关于它的原理, 说简单也简单, 随便画个图喷一下Map 和 Reduce两个阶段似乎就完了。 但其实这里面还包含了So
2014-05-19 17:53:57 563 1
转载 Partitioner, SortComparator and GroupingComparator in Hadoop
hadoop 0.20.2 api里面,作业被重新定义到了类 org.apache.hadoop.mapreduce.Job。 它有3个特别的方法: job.setPartitionerClass(Partitioner p); job.setSortComparatorClass(RawComparator c); job.setGroupingComparatorClass
2014-05-16 21:24:13 453
转载 Hadoop如何处理关联计算
假设:HDFS上有2个文件,分别是客户信息和订单信息,customerID是它们之间的关联字段。如何进行关联计算,以便将客户名称添加到订单列表中? 一般方法是:输入2个源文件。根据文件名在Map中处理每条数据,如果是Order,则在foreign key上加标记”O”,形成combined key;如果是Customer则做标记”C”。Map之后的数据按照key分区,再按照combi
2014-05-16 21:23:24 1086
转载 MapReduce的自制Writable分组输出及组内排序
问题描述: 输入文件格式如下: name1 2 name3 4 name1 6 name1 1 name3 3 name1 0 要求输出的文件格式如下: name1 0,1,2,6 name3 3,4 要求是按照第一列分组,name1与name3也是按照顺序排列的,组内升序排序。
2014-05-16 21:07:35 376
转载 Mockito:一个强大的用于 Java 开发的模拟测试框架
介绍 本文将介绍模拟测试框架Mockito的一些基础概念, 介绍该框架的优点,讲解应用Mockito的Java示例. 模拟(Mock)的概念 在软件开发的世界之外, "mock"一词是指模仿或者效仿. 因此可以将“mock”理解为一个替身,替代者. 在软件开发中提及"mock",通常理解为模拟对象或者Fake. 译者注:mock等多代表的是对被模拟对象的抽象类,你可以把f
2014-05-15 21:24:22 609
hadoop-0.20.3-dev-eclipse-plugin.jar
2013-10-29
Struts2+Hibernate3+Spring2.5整合详细步骤+实例可运行代码
2013-10-01
Data Structures and Algorithms in Java
2013-04-12
Data Structures and Algorithm Analysis in Java Third Edition
2013-04-12
中国大数据技术与产业发展白皮书 2013 中国计算机学会大数据专家委员会
2014-12-11
暴风影音csf解码器
2014-11-05
JavaScript语言精粹
2014-09-24
Project 2007 从入门到精通(清华社出版) 案例文件
2014-07-31
IT项目经理成长手记 潘东
2014-07-23
《从技术走向管理——李元芳履职记》.(王树文)
2014-07-23
Windows XP 系统下创建 Objective-C 集成开发环境
2014-04-07
Hadoop技术内幕 深入理解MapReduce架构设计与实现原理
2014-03-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人