Hadoop
thundersssss
专注于通用搜索引擎算法,垂直搜索引擎
展开
-
国内外著名的互联网公司使用hadoop都做了什么?谈HADOOP在大规模数据处理领域的具体应用。
HADOOP在阿里巴巴: 用于处理商业数据的排序,并将其应用于阿里巴巴的ISEARCH搜索引擎,垂直商业搜索引擎。节点数: 15台机器的构成的服务器集群服务器配置: 8核CPU,16G内存,1.4T硬盘容量。 HADOOP在百度:HADOOP主要应用日志分析,同时使用它做一些网页数据库的数据挖掘工作。节点数:10 - 500个节点。周数据量: 3000TB原创 2010-04-29 10:11:00 · 7412 阅读 · 1 评论 -
终于有解了~~hadoop Does not contain a valid host:port authority: file:///
valid host:port authority: file://HADOOP遇到namenode: at org.apache.hadoop.net.NetUtils.createSocketAddr错误 最近装HDFS分布式文件系统,用于替换之前坑爹的MFS (为什么坑爹,稍后再谈)折腾了一下午,不过还好总算是有解决办法了~ 之所以造成原创 2014-12-18 11:48:08 · 6883 阅读 · 0 评论