Hadoop
文章平均质量分 69
伊利诺
这个作者很懒,什么都没留下…
展开
-
导入hadoop-2.3.0源代码到eclipse中
Importing projects to eclipseWhen you import the project to eclipse, install hadoop-maven-plugins at first. $ cd hadoop-maven-plugins $ mvn installThen, generate eclipse project files.原创 2014-04-30 23:44:02 · 589 阅读 · 0 评论 -
DFSConfigKeys
public class DFSConfigKeys extends CommonConfigurationKeys { public static final String DFS_BLOCK_SIZE_KEY = "dfs.blocksize"; public static final long DFS_BLOCK_SIZE_DEFAULT = 128*1024*102原创 2014-05-31 21:44:55 · 1849 阅读 · 0 评论 -
Multiple DataNodes on a single machine
http://mail-archives.apache.org/mod_mbox/hadoop-common-user/201009.mbox/%3CA3EF3F6AF24E204B812D1D24CCC8D71A03688F76@mse16be2.mse16.exchange.ms%3E转载 2014-05-30 22:32:41 · 588 阅读 · 0 评论 -
hadoop-2.4.1 生成eclipse 工程后的错误解决
1.找不到TestProtos.java,TestRpcServiceProtos.java,AvroRecord.java 三个类原创 2014-07-22 21:45:52 · 803 阅读 · 0 评论 -
Eclipse 导入 Hadoop 源码
Eclipse 导入 Hadoop 源码1.准备工作jdk:eclipse:Maven:libprotoc :https://developers.google.com/protocol-buffers/hadoop:http://www.apache.org/dyn/closer.cgi/hadoop/common/ 添加开源中国maven库:http://maven.o转载 2014-07-20 21:29:59 · 579 阅读 · 0 评论 -
HDFS之StorageInfo
public class StorageInfo { public int layoutVersion; // layout version of the storage data public int namespaceID; // id of the file system public String clusterID; // id of th原创 2014-07-18 15:24:45 · 1311 阅读 · 0 评论 -
HDFS之Storage continue......
/** * Storage information file. * * Local storage information is stored in a separate file VERSION. * It contains type of the node, * the storage layout version, the namespace id, and *原创 2014-07-18 15:58:22 · 876 阅读 · 0 评论 -
HDFS简介
http://www.cnblogs.com/forfuture1978/archive/2010/03/14/1685351.html转载 2014-05-07 21:41:06 · 440 阅读 · 0 评论 -
微软宣布全面拥抱Hadoop
为了解决企业内部大数据处理的问题。微软近日宣布将于从雅虎分拆出来的Hortonworks合作开发利用Apache Hadoop实现的Windows Server以及Windows Azure平台。Hortonworks作为微软的战略合作伙伴将会借助自己在此领域的专长帮助最大化将Hadoop集成到微软的产品之中。 微软表示预计在今年年底可推出基于Hadoop的Windows Azu...转载 2014-05-07 21:24:39 · 473 阅读 · 0 评论 -
安装
http://www.itpub.net/thread-1760789-1-1.html原创 2014-05-06 22:14:09 · 457 阅读 · 0 评论 -
hdfs-webdev
hdfs-webdev介绍 (2011-08-15 19:54:12)转载▼标签: hadoop webdav http://code.google.com/p/hdfs-webdav/downloads/detail?name=hdfs-webdav.war文章来自软件中的doc/guild.转载 2014-05-06 21:39:07 · 829 阅读 · 0 评论 -
safemode
hadoop dfsadmin -safemode leave有两个方法离开这种安全模式 1. 修改dfs.safemode.threshold.pct为一个比较小的值,缺省是0.999。 2. hadoop dfsadmin -safemode leave命令强制离开http://bbs.hadoopor.com/viewthread.php?tid=61&extra=page=原创 2014-04-20 11:27:22 · 696 阅读 · 0 评论 -
Microsoft Service For Unix(SFU)使用指南
当前企业使用的主流操作系统一般有三种,windows,unix,linux,但如何集成各种不同平台的数据,对系统管理员提出了新的要求。这里介绍一下微软发布的一款免费的软件,这款软件也被集成到了windows2003中,就是Service For Unix(SFU),现在的版本是3.5,可以在http://www.microsoft.com/windowsserversystem/sfu/downl转载 2014-05-06 22:39:09 · 1477 阅读 · 0 评论 -
NFS v3 介绍
NFS v3 介绍 2013-04-15 09:06:42| 分类: rhel_nfs|举报|字号 订阅NFS(Network File System)是由升阳(Sun)最先开发,它的目标是让不同机器能够跨平台共享相同的档案资源。简单来说,可以看成是一种远端的档案系统。也因为跨平台的目标,所以几乎所有的Unix Like平台都支援NFS,如IBM A转载 2014-05-06 22:04:12 · 4673 阅读 · 0 评论 -
Hadoop For Windows
Hadoop从一出生就只面向Linux操作系统,且一直未曾考虑支持Windows操作系统。但随着Hadoop的普及,微软不得不开始为Hadoop增加patch以推进Windows成为生产环境。经过各方努力,Apache Hadoop已经同意将这些windows patch融入到核心代码中(http://hortonworks.com/blog/hadoop-in-windows/),目前,Ha转载 2014-05-06 21:51:17 · 719 阅读 · 0 评论 -
Cannot lock storage . The directory is already locked.
Cannot lock storage /tmp/hadoop-root/dfs/name. The directory is already locked.原创 2014-04-20 12:55:54 · 1221 阅读 · 0 评论 -
start namenode
copy /home/hadoop/apache/hadoop/build/hadoop-2.4.1-src/hadoop-hdfs-project/hadoop-hdfs/target/classes原创 2014-07-24 21:47:45 · 576 阅读 · 0 评论