淘宝Fourinone分布式计算框架性能、压力、容灾测试报告

最新推荐文章于 2018-08-14 23:58:24 发布
最新推荐文章于 2018-08-14 23:58:24 发布
阅读量1.1k 收藏 1
点赞数
分类专栏： hadoop 云计算 并行计算 zookeeper 分布式计算 文章标签： 分布式计算 测试 框架 hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fourinone/article/details/7298121
版权
Fourinone在去年11月在淘宝内部通过了压测，上亿排序和wordcount等经典指标均优于hadoop，这是一份长达10多页的详细测试报告:
http://down.51cto.com/data/337250 (下载无须积分)
fourinone
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
灾难恢复报告
antony0203的专栏
12-25 2397
1.       公司背景及现有的灾难应对策略1.1 公司背景       我的公司对日软件外包企业，主要从事IT项目开发及维护工作。1.2 公司信息系统构成及数据分布        公司除了总经理和副总经理外主要有人事财务部，开发部，主机部三个部门，对于经理来说，重要的数据是关于客户的信息，合同等内容，基本保存于经理自己的个人电脑内。对于人事财务部来说，保存的数据有员工信息，财务
具有基于全定制分布式内存的可重配置处理元件阵列的高速视觉处理器
03-14
本文提出了一种基于紧凑型全定制分布式存储器的混合视觉处理器，用于近传感器高速图像处理。 拟议的处理器由可重构处理元件（PE）阵列，行处理器（RP）阵列和双核微处理器组成。 PE阵列包括带有紧凑的全定制分布式存储器的二维处理元件。 它支持在PE阵列和自组织映射（SOM）神经网络之间进行实时重新配置。 视觉处理器采用0.18 µm CMOS技术制造。 分布式存储器的电路面积显着减少到传统存储器的1/3，因此视觉处理器的电路面积减少了44.2％。 实验结果表明，提出的设计实现了正确的功能。
Fourinone分布式计算框架性能、压力、容灾测试报告
02-27
Fourinone在去年11月在淘宝内部通过了压测，上亿排序和wordcount等经典指标均优于hadoop，这是一份长达10多页的详细测试报告
灾难恢复测试报告最新版通用
02-25
灾难恢复测试报告最新版
学习资料：淘宝分布式并行计算四合一框架Fourinone
最新发布
09-05
Fourinone分布式计算框架性能、压力、容灾测试报告；框架压缩包 本示例把分配任务的程序比喻为“工头”，可以有一个工头进程，也可以有多个工头进程；把处理任务的程序比喻为“工人”，可以在多台机器上启动工人程序...
Fourinone分布式计算框架
08-29
FourInOne（中文名字“四不像”）是一个四合一分布式计算框架，在写这个框架之前，我也看了老外写的其他开源框架，也对分布式计算进行了长时间的思考，当我们把复杂的hadoop当作一门学科学习时，似乎忘记了我们想...
Fourinone分布式并行计算四合一框架
06-12
Fourinone(中文名字“四不像”)是一个四合一分布式计算框架，在写这个框架之前，我对分布式计算进行了长时间的思考，也看了老外写的其他开源框架,当我们把复杂的hadoop当作一门学科学习时，似乎忘记了我们想解决问题...
Fourinone创始人彭渊：打造多合一的分布式并行计算框架
wangluozhangleilei的专栏
10-16 1618
Fourinone是一个分布式并行计算框架，以轻量的方式提供了一个四合一的分布式框架功能以及简单易用的API，通过实现对多台计算机资源的统一利用，来获得强大的计算能力。本期我们采访了项目创始人彭渊。 Fourinone（即Four-in-one，中文名字“四不像”）是一个分布式计算框架，提供了一个4合1的分布式框架功能（即整合了Hadoop、Zookeeper、MQ、分布式缓存的主要功能
fourinone-2.05.28.rar
05-15
淘宝Fourinone2.0提供了一个4合1分布式框架和简单易用的编程API，实现对多台计算机CPU，内存，硬盘的统一利用，从而获取到强大计算能力去解决复杂问题。Fourinone框架提供了一系列并行计算模式（农民工/包工头/职介绍/手工仓库）用于利用多机多核CPU的计算能力；提供完整的分布式缓存和小型缓存用于利用多机内存能力；提供像操作本地文件一样操作远程文件（访问，并行读写，拆分，排它，复制，解析，事务等）用于利用多机硬盘存储能力；由于多计算机物理上独立，Fourinone框架也提供完整的分布式协同和锁以及简化MQ功能，用于实现多机的协作和通讯。 fourinone-2.05.28\fourinone2.0 .................\............\config.xml .................\............\fourinone-2.05.28-src.jar .................\............\fourinone-2.05.28.jar .................\............\指南和demo .................\............\..........\MQ demo .................\............\..........\.......\MQ demo.txt .................\............\..........\.......\ParkServerDemo.java .................\............\..........\.......\Publisher.java .................\............\..........\.......\Receiver.java .................\............\..........\.......\Sender.java .................\............\..........\.......\Subscriber.java .................\............\..........\WordCount .................\............\..........\.........\inputdata.txt .................\............\..........\.........\ParkServerDemo.java .................\............\..........\.........\WordCount.txt .................\............\..........\.........\WordcountCT.java .................\............\..........\.........\WordcountWK.java .................\............\..........\分布式文件访问和操作demo .................\............\..........\........................\FttpBatchWriteReadDemo.java .................\............\..........\........................\FttpCopyDemo.java .................\............\..........\........................\FttpMulCopyDemo.java .................\............\..........\........................\FttpMulWriteReadDemo.java .................\............\..........\........................\FttpOperateDemo.java .................\............\..........\........................\FttpParseDemo.java .................\............\..........\........................\FttpRo
fourinone源代码分析
01-17
通过示例，对fourinone源代码进行分析。对此有兴趣的可以看看。
Fourinone如何实现并行计算和数据库引擎
博客
03-02 524
日前，彭渊在「CSDN架构师金牌授课微信群」进行了分享，和与会者进行了一场高效的技术交流，讲师申请和入群参见文章末尾。彭渊，在Java技术领域从业十多年，曾撰写多款开源软件，历任淘宝高级专家和华为中间件首席架构师。开源代表作有Fourinone（四不像）分布式核心技术框架、CoolHash并行数据库引擎等，曾出版书籍《大规模分布式系统架构与设计实战》。 以下为作者分享的整理：前言：“如何用70行j...
Fourinone分布式部署配置文档
wangyanming123的博客
05-27 1355
Fourinone分布式部署配置文档
写给分布式神器Fourinone
tianshilang的专栏
05-06 195
fourinone号称了集成了hadoop,zk,memcache,mq于一身的四不像超级神器，致力于分布式应用。别的我不懂，今儿聊一下fourinone中的分布式缓存以及分布式文件系统，说到分布式，不得不用到网络通讯，不得不提及RPC，fourinone号称只有100多K，不依赖任何第三方jar，那通讯怎么玩啊！自己用socket或者NIO实现，要知道用NIO实现一个网络通讯框架是很考验...
微服务架构初探（转）
frank1998819
03-16 644
    什么是微服务 首先微服务并没有一个官方的定义，想要直接描述微服务比较困难，我们可以通过对比传统WEB应用，来理解什么是微服务。 传统的WEB应用核心分为业务逻辑、适配器以及API或通过UI访问的WEB界面。业务逻辑定义业务流程、业务规则以及领域实体。适配器包括数据库访问组件、消息组件以及访问接口等。一个打车软件的架构图如下： 尽管也是遵循模块化开发，但最终它们会打包并部署...
淘宝应对"双11"的技术架构分析
LiTong
11-16 4086
海量数据的技术架构 关系型数据库应用 NoSQL具有优势的优点 前后端分离技术 缓存技术
俄罗斯套娃问题
不远远方
08-14 3512
【题目】 输入：第一行 n ,表示有n个套娃。之后n行，每行两个整数：分别表示宽和高。 只有宽和高都大于的才能嵌套。 输出：嵌套的最大层数。 提示：插入排序+LIS算法（最大上升子序列） 【解答】 方法一：暴力算法，空间复杂度为O（1）（不算读取数据的数组）。时间复杂度：O（n*n）。 import java.util.Scanner; public class Russia...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值