云计算
feil110
这个作者很懒,什么都没留下…
展开
-
MapReduce:一个重大的倒退
原文:http://apps.hi.baidu.com/share/detail/6912773翻译:MapReduce:一个重大的倒退 这篇文章是由databasecolumn的几个数据库大牛写的,简要的介绍了MapReduce以及将其与现代数据库管理系统进行了对比,并指出了一些不足之处。本文纯属学习性翻译,从多方面来了解MapReduce,不代表完全赞同原文的...2011-10-14 15:55:00 · 66 阅读 · 0 评论 -
有关kvm
有一台式机,希望能模拟一个三四台的小集群,因为装的ubuntu,查了一下资料,kvm能充分发挥cpu(cpu支持vt-x技术),工作如下: 找到了以下两篇:http://springsfeng.iteye.com/blog/1481861http://article.yeeyan.org/view/90729/347306 按照第一篇走下来,最终成功,需要记一下,不是一...原创 2013-03-16 21:15:00 · 143 阅读 · 0 评论 -
hadoop eclipse plugin 之二
前面已经有一篇记述了hadoop-plugin for eclipse的安装,但是仍受限于run on hadoop不能工作,而且是在虚拟机内部,没有试过在虚拟机外用eclipse连接虚拟机内部的hdfs为解决以上两问题,总结这两天的工作情况一、结合网上的说法,plugin是用eclipse europa开发的,可以和这个版本良好结合,试过,确实可以使用run on hadoop了。二...原创 2011-12-03 11:47:02 · 91 阅读 · 0 评论 -
HDFS study
http://varyall.iteye.com/blog/763783http://www.docin.com/p-203214495.htmlhttp://blog.csdn.net/fly542/article/details/6817444《hadoop实战指南》HDFS实验设计前提与目标体系结构保证可靠性常用操作...2011-11-16 21:18:00 · 71 阅读 · 0 评论 -
0727
ftp架设http://blog.csdn.net/Ericherry/article/details/6224281hivehttp://xm-king.iteye.com/blog/1088422http://wenku.baidu.com/view/90dad7659b6648d7c1c7460e.html平台架设http://rdc.taobao.com/team/...2011-11-16 21:18:00 · 102 阅读 · 0 评论 -
yahoo论文:Benchmarking Cloud Serving Systems with YCSB
摘要:针对大规模数据分析的mapreduce技术已被广泛意识和研究,我们已经看到了云数据服务系统数量的爆炸性增长。这些新系统是所谓“云OLTP”应用,虽然它们并不支持ACID事务。典型例子如BigTable,PNUTS,Cassandra,HBase,Azure,CouchDB,SimpleDB,Voldemort,等等。而且它们被应用于不同于传统服务工作量的很多领域(如TPC-C)。The nu...2011-11-16 21:16:00 · 367 阅读 · 0 评论 -
YCSB%e6%b5%8b%e8%af%95hbase
首先,ycsb放狗,第一个就是https://github.com/brianfrankcooper/YCSB/wiki新东西一般只有国外首先有技术文档,所以一定要耐着性子看英文,开个词霸,google翻译从getting started开始obtain YCSB source首先是下载一个压缩包,或者安装git(类似svn)下载源代码,再buildbuild the ba...2011-11-16 21:16:00 · 574 阅读 · 0 评论 -
hbase 索引记录
根本目的是实时的查询速度 从两方面来看:一、HBase自身的原理,机制。二、索引的原理机制。 一、HBase:reference: HBase技术介绍|淘宝技术博客http://www.searchtb.com/2011/01/understanding-hbase.htmlHBASE松散数据存储设计初识|放翁(文初)的一亩三分地http://w...2011-11-16 21:15:00 · 136 阅读 · 0 评论 -
erlang重新开张
以此庆贺重拾erlang 重看《erlang程序设计》一书,从安装开始,已经试过windows安装,这次先试linux安装,然后卸载掉安装命令用apt-get install erlang 安装完成后,可以用erl命令查看安装好的erlang相关信息,并进入erlang shell退出命令是先ctrl+c,然后选A 卸载erlang命令:...2011-11-16 13:39:00 · 71 阅读 · 0 评论 -
MapReduce流程分析
原文:http://blog.csdn.net/jackydai987/article/details/6227365 MapReduce流程分析接触Hadoop已经1年了,一直没时间好好学习下。这几天打算好好研究下Hadoop.本来是想打算改写下TextInputFormat。看了源码后,反而更迷糊了。所以干脆连MapReduce的整个流程写下来。也当为这几天的学习作个总结。...原创 2011-12-13 18:39:38 · 79 阅读 · 0 评论 -
eclipse plugin 终于有作用了
前几天一直无进展,今天也弄了半天,但是出现了转机,不再是那个“connection to myubuntu(这里是自己起的名字) org/apache/hadoop/configuration/configuration”的错误了,因为我当时直接双击下方那个view里的图标,结果报出的错误是An internal error occurred during: “Map/Reduce locatio...2011-11-05 16:19:00 · 126 阅读 · 0 评论 -
hbase终于跑起来了再续
java.lang.NoClassDefFoundError: org/apache/commons/configuration在晚上自己的机器里重复时发现上述问题,将hadoop/lib下的包copy到hbase/lib下就可以了2011-11-02 21:01:00 · 69 阅读 · 0 评论 -
[转]Twitter首席工程师:如何“打败”CAP定理
英文原文:How to beat the CAP theorem作者: Nathan Marz 来源: 《程序员》本篇转自:http://kb.cnblogs.com/page/124567/ CAP 定理是数据系统设计的基本理论,目前几乎所有的数据系统的设计都遵循了这个定理。但 CAP 定理给目前的数据系统带来了许多复杂的、不可控的问题,使得数据系统的设计越来越复杂。Tw...原创 2011-12-12 11:44:33 · 140 阅读 · 0 评论 -
自行编译hadoop eclipse-plugin for eclipse3.7
主要是这两篇文章:http://varyall.iteye.com/blog/763886http://hi.baidu.com/feng2211/blog/item/4ab8a2095eb1b9a42eddd48e.html 在我的实践过程中,按照前者的顺序,ant compile->ln -sf ... ->ant package在ant package时...原创 2011-12-12 11:33:34 · 79 阅读 · 0 评论 -
hbase终于跑起来了 续
其实在前面还有一段,没有保存下当时的经历,现在将配置项保存一下首先好像遇到过一个说hbase与hadoop版本不一致的问题(rpc问题),于是将hadoop的core包copy到了hbase的lib下,代替已有的那个hadoop-core包hbase-site.xml <?xml version="1.0"?><?xml-stylesheet type=...2011-11-02 15:09:00 · 115 阅读 · 0 评论 -
hbase单机终于跑起来了
去看了日志文件2011-11-01 23:44:06,998 INFO org.apache.zookeeper.server.PrepRequestProcessor: Got user-level KeeperException when processing sessionid:0x1336304bc350000 type:delete cxid:0x15 zxid:0xffffffff...2011-11-02 15:00:00 · 154 阅读 · 0 评论 -
[转]Yahoo持续的Pig/Hadoop(MapReduce)工作流
传送门:http://blog.sina.com.cn/s/blog_4a1f59bf0100utvd.html 主要内容我不用帖了,其实让我更有所得(或有所思)的是后面的评论:(贴一下,链接同上) medcl2011-08-31 15:09:40 [举报]Overnight success takes long time.~~小史的窗户2...原创 2013-03-16 21:40:29 · 142 阅读 · 0 评论