![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
Eickrow
正在养成写博客的习惯.......
展开
-
Hadoop学习笔记(1)----项目简述
1.Common:一系列组件和接口,用于分布式文件系统和通用I/O(序列化、Java RPC和持久化数据结构) 2.Avro:一种序列化系统,用于支持高效,跨语言的RPC和持久化数据存储 3.MapReduce:分布式数据处理模型和执行环境,运行于大型商用机集群 4.HDFS:分布式文件系统,运行于大型商用机集群 5.Pig:数据流行语言和运行环境,用以探究非常庞大的数据集。Pig运行在Ma原创 2016-05-04 17:18:14 · 340 阅读 · 0 评论 -
Hadoop学习笔记(2)----命令归总
HDFS常用命令归总1)列出HDFS下的文件hadoop fs -ls2)上传本地文件到HDFShadoop fs -put dir1 dir2说明:dir1,本地文件系统文件目录;dir2,HDFS文件系统文件目录3)下载HDFS文件到本地hadoop fs -get dir1 dir2说明:dir1,本地文件系统文件目录;dir2,HDFS文件系统文件目录4)创建HDFS文件hadoop原创 2016-06-29 12:18:26 · 390 阅读 · 0 评论