- 博客(10)
- 资源 (16)
- 收藏
- 关注
转载 hadoop面试题
海量数据面试题整理 1. 给定a、b两个文件,各存放50亿个url,每个url各占64字节,内存限制是4G,让你找出a、b文件共同的url? 方案1:可以估计每个文件安的大小为50G×64=320G,远远大于内存限制的4G。所以不可能将其完全加载到内存中处理。考虑采取分而治之的方法。 s 遍历文件a,对每个url求取,然后根据所取得的值将url分别存储到1000个小文
2015-03-15 11:37:09 602 1
原创 hadoop介绍及虚拟机环境配置
1、hadoop是什么? 答:适合大数据的分布式存储与计算平台2、HDFS是什么? hadoop distributed file system 分布式文件系统 HDFS的架构: 主从结构: 主节点:namenode(只有一个) 接受用户操作请求 维
2015-03-15 11:25:42 571
原创 hadoop单词计数
源数据hello youhello me package mapreduce003;import java.io.File;import java.io.FileInputStream;import java.io.FileNotFoundException;import java.io.IOException;import java.net.URI;import
2015-03-15 11:18:11 1529
转载 接口汇总
1、地图坐标转换 各地址转换 http://api.zdoz.net/interfaces.aspx 带显示的坐标转换 http://www.gpsspg.com/maps.htm2、通用接口汇总http://www.bejson.com/go.html?u=http://www.bejson.com/webInterface
2015-03-12 14:11:32 1701
原创 at com.baidu.mapapi.map.BaiduMap.clear(Unknown Source)
百度地图 map.clear()空指针异常处理if (mBaiduMap != null) mBaiduMap.clear(); 参考:http://bbs.lbsyun.baidu.com/forum.php?mod=viewthread&tid=81935&highlight=clear现在的解
2015-03-12 11:12:51 9219 5
转载 Android 命名规范 (提高代码可以读性)
刚接触android的时候,命名都是按照拼音来,所以有的时候想看懂命名的那个控件什么是什么用的,就要读一遍甚至好几遍才知道,这样的话,在代码的审查和修改过程中就会浪费不少不必要的时间。如果就是我一个人开发,一个人维护的话还好,可是如果一个项目是团队分工合作,这样让你的同事去看你的代码就更加吃力了,因为大家之间的编程方式不一样,所以,在开发过程中,命名规范统一尤为重要,最好是团队中统一好大家命名方法
2015-03-11 11:28:11 606
转载 错误Name node is in safe mode的解决方法
将本地文件拷贝到hdfs上去,结果上错误:Name node is in safe mode这是因为在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下,文件系统中的内容不允许修改也不允许删除,直到安全模式结束。安全模式主要是为了系统启动的时候检查各个DataNode上数据块的有效性,同时根据策略必要的复制或者删除部分数据块。运行期通过命令也可以进入安全
2015-03-05 17:53:59 634
转载 Eclipse中10个最有用的快捷键组合
一个Eclipse骨灰级开发者总结了他认为最有用但又不太为人所知的快捷键组合。通过这些组合可以更加容易的浏览源代码,使得整体的开发效率和质量得到提升。1. ctrl+shift+r:打开资源这可能是所有快捷键组合中最省时间的了。这组快捷键可以让你打开你的工作区中任何一个文件,而你只需要按下文件名或mask名中的前几个字母,比如applic*.xml。美中不足的是这组快捷键并非在所有
2015-03-05 16:24:10 609
转载 面向对象设计的SOLID原则
S.O.L.I.D是面向对象设计和编程(OOD&OOP)中几个重要编码原则(Programming Priciple)的首字母缩写。SRPThe Single Responsibility Principle 单一责任原则OCPThe Open Closed Principle 开放封闭原则LSPThe L
2015-03-05 09:32:20 586
poi-bin-3.13-20150929
2015-11-03
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人