- 博客(5)
- 收藏
- 关注
原创 MapReduce系列---
1、介绍 源于Google的MapReduce论文(发表与2004年,Hadoop MapReduce是Google MapReduce的克隆版) 2、MapReduce特点 良好的扩展性; 高容错性; 适合PB级以及海量数据的离线处理;3、MapReduce分布式计算框架解决WordCount问题
2016-10-18 15:15:11 265
原创 字符串系列---word search
题目 已知:一个二维字符矩阵,一个单词; 输出:该单词是否可以从二维矩阵中拼接出来?拼接规则:从矩阵的某一行的某个字母开始,持续向临近的字符扩展(向上,向下,向左,向右),直至拼接出该单词。若可以拼出,则输出false,若拼不出,则输出false; 例如: 【A,B,C,D,E E,F,G,H,U A,B,S,D,F 】 单词为ABCGH,输出true; 单词为FG
2016-10-14 14:19:36 323
原创 数据结构和算法数组系列---求数组的笛卡尔积
题目 有n个数组,每个数组中的元素个数不同,求这n个数组的所有排序组合。 比如,有3个数组,A(a1,a2,a3),B(b1,b2),C(c1,c2);则笛卡尔积为:a1b1c1,a1b1c2,a1b2c1,….思路 设置一个数组count[n],对应n个数组,count[i]表示取第i个数组的第count]i]个元素;初始化count均为0,遍历每个数组,对于第i个数组,从该数组中取出第co
2016-10-11 22:22:24 3176
原创 HDFS分布式文件系统系列---HDFS 2.0新特性
1、新特性NameNode HANameNode FederationHDFS 快照HDFS 缓存HDFS ACL异构层级存储结构2、NameNode HA多个namenode,一个为active,一个standby,通过zookeeper管理;3、NameNode Federation多个namenode,多个active,多个standby(每个active有一个standby);
2016-10-02 15:00:45 2661
原创 HDFS分布式文件系统系列---HDFS程序设计
1、HDFS访问方式shell命令 Java API Rest API HDFS Fuse:实现了Fuse协议 HDFS lib hdfs : c/c++访问接口 HDFS 其他编程语言API使用thrift实现支持c++ 、python、php等语言2、shell命令1)文件操作命令bin/hadoop fs ….将本地文件上传到HDFS: bin/hadoop fs -copyF
2016-10-02 13:02:05 378
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人