hadoop
chiweitree
码农
展开
-
【hadoop 2.6】hadoop 2.6集群环境搭建及文件系统使用
4台机器176.177.178,179176是resourcemanager177是namenode178是datanode,nodemanager179是datanode,nodemanager首先为了方便,4台机器之前全部建立ssh无密码登录,详见:http://blog.csdn.net/simonchi/article/details/39054437配好hos原创 2015-01-26 17:12:50 · 2618 阅读 · 0 评论 -
【hadoop 2.6】hadoop 2.6源码编译过程,redhat 5.8操作系统进行编译【附:软件下载】
大家在官网下载hadoop2.6安装完使用的时候,总是在控制台有这样一句 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable因为官网给的32位系统编译的版本,在64位的操作系统上使原创 2015-02-04 16:53:42 · 1753 阅读 · 0 评论 -
【hadoop 2.6】hadoop2.6伪分布模式环境的搭建测试使用
首先下载安装,这个就不说了,去apache官网下载安装,貌似186M,很大解压后,我们看下目录结构如下:[root@com23 hadoop-2.6.0]# lltotal 64drwxr-xr-x 2 20000 20000 4096 Nov 14 05:20 bindrwxr-xr-x 3 20000 20000 4096 Nov 14 05:20 etcdrwxr-xr-原创 2015-01-14 15:58:09 · 2345 阅读 · 0 评论 -
【HDFS】hdfs如何打开回收站机制trash,恢复删除的文件
在hdfs中,默认的文件删除保留的时间是0,也就是没有保留删除的文件,删除即丢失那么如果你想启用hdfs的回收站机制,在删除文件后,希望多久之后,文件才消失,因为这个过程中万一你想来恢复文件呢 fs.trash.interval 1440 将以上配置添加到core-site.xml中即可,1440表示删除的文件保存1440原创 2015-03-05 14:31:21 · 7793 阅读 · 0 评论 -
【HDFS】HDFS的整体架构设计,阅读笔记
以上是该命令的选项[root@com22 bin]# sh hdfs fsck /flume/events/2015/03/02/13 -racksConnecting to namenode via http://com22.authentication:50070FSCK started by root (auth:SIMPLE) from /192.168.11.177 fo原创 2015-03-05 15:07:00 · 2445 阅读 · 0 评论