大数据_Hadoop
文章平均质量分 67
xuanmu
这个作者很懒,什么都没留下…
展开
-
IDC中的incast 技术
IPv4/IPv6中有Unicast, multicast, anycast甚至broadcast技术。现在,随着云计算和数据中心的发展,又来了一个叫incast的技术。Incast(又称TCP incast,因为是TCP协议的事情)是many-to-one的通信模式,因为云计算应用导致这种技术主要是TCP协议方式的。Incast技术主要发生在云计算数据中心,尤其是那些以scale o转载 2014-04-03 20:21:47 · 5170 阅读 · 0 评论 -
Hadoop Problem : java.io.IOException: Unknown protocol to DataNode: org.apache.hadoop.mapred.JobSubm
Cannot connect to the Map/Reduce location: myfsjava.io.IOException: Unknown protocol to DataNode: org.apache.hadoop.mapred.JobSubmissionProtocol原创 2014-09-17 13:44:41 · 1274 阅读 · 0 评论 -
Hadoop Problem : org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible
org.apache.hadoop.hdfs.server.datanode.DataNode: java.io.IOException: Incompatible namespaceIDs原创 2014-09-16 20:19:58 · 783 阅读 · 0 评论 -
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (一) Cygwin(64位)的安装 + ssh的配置
系统原有环境:Win7操作系统 +原创 2014-09-12 12:14:51 · 3912 阅读 · 2 评论 -
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (二) Hadoop的安装
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (二)=原创 2014-09-12 12:37:32 · 2144 阅读 · 1 评论 -
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (三) 在Eclipse中配置Hadoop
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (一) Cygwin(64位)的安装 + ssh的配置原创 2014-09-12 12:50:55 · 1592 阅读 · 3 评论 -
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (四) 导入Hadoop源码+wordcount程序+运行
win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (一) Cygwin(64位)的安装 + ssh的配置win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (二) Hadoop的安装win7(64位)平台下Cygwin+Eclipse搭建Hadoop单机开发环境 (三) 在Eclipse中配置Hadoop原创 2014-09-12 13:24:06 · 1134 阅读 · 0 评论 -
Hadoop Problem : hadoop0.20.2中的KeyValueTextInputFormat
from:http://blog.csdn.net/yutinghao/article/detailsKeyValueTextInputFormat今天想用数据输入格式KeyValueInputFormat,API文档上的方法,我使用job.setInputFormatClass(KeyValueTextInputFormat.class);结果却报错The method setInput转载 2014-09-19 13:28:35 · 725 阅读 · 0 评论 -
16个nosql数据库
1、MongoDB介绍MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。主要解决的是海量数据的访问效率问题,为WEB应用提供可扩展的高性能数据存储解决方案。当数据量达到50GB以上的时候,MongoDB的数据库访问速度是MySQL的10倍以上。MongoDB的并发读写效率不是特别出色,根据官方提供的性能测试表明,大约每秒可以处理0.5万~1.5万次读写请求。Mo转载 2014-07-06 20:29:07 · 1029 阅读 · 0 评论 -
在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境
from : http://gaoxianwei.iteye.com/blog/2026942博主太有耐心了,忍不住往自己空间转载 2014-05-11 15:26:21 · 2204 阅读 · 2 评论 -
Hadoop Problem : Wrong FS: hdfs://localhost:9000/output, expected: file:///
照着《Hadoop实战》写了一个程序:Exception in thread "main" java.lang.IllegalArgumentException: Wrong FS: hdfs://localhost:9000/output, expected: file:/// at org.apache.hadoop.fs.FileSystem.checkPath(FileSystem.原创 2014-09-17 13:53:45 · 5267 阅读 · 1 评论