hadoop学习笔记
文章平均质量分 76
yraspen
这个作者很懒,什么都没留下…
展开
-
hadoop学习笔记2:hadoop分布式环境搭建
一、实验目的:(1)搭建一套hadoop的分布式运行环境,用于学习hadoop相关知识。(2)相对于为分布式和本地模式,分布式环境更接近于实际的生产环境NameNodeJobTrackerSecondaryNameNodeSlaveschaoren1chaoren2chaoren原创 2014-05-10 10:51:02 · 496 阅读 · 0 评论 -
hadoop学习笔记3:shell下的hdfs操作
作业:当使用hadoop fs -put上传一个文件到hdfs时,(1)如果目的地是一个已经存在的目录时,上传后的文件名是什么?答: ----准备工作:清空hdfs[cr12@chaoren1 ~]$ hadoop fs -rmr hdfs://chaoren1:9012/*Deleted hdfs://chaoren1:9012/mntDele原创 2014-05-10 10:53:00 · 541 阅读 · 0 评论 -
hadoop学习笔记1:实现ssh免密码登录
一、实验目的:启动和运行hadoop集群时,主节点和从节点之间会进行频繁的数据通信,为避免手动进行多次密码认证和提高数据传输的安全性,需要实现ssh免密码登录二、需求分析: (一)实现chaoren1、chaoren2、chaoren3、chaoren4、chaoren5每台机器自身的免密码登录 (二)实现chaoren1与其他4台机器的原创 2014-05-10 10:49:30 · 457 阅读 · 0 评论 -
hadoop学习笔记4:java实现hdfs -ls/-lsr
作业1:java代码实现hadoop fs -lsr的功能,调用FileSystem.listStatus(...)方法,显示结果,要求结果显示样式如hadoop fs -ls xxx的结果类似。作业2:java 代码实现 hadoop fs -lsr 的功能------上面两题的代码如下:package hdfs;imp原创 2014-05-10 10:58:59 · 2002 阅读 · 0 评论