![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
架构
h254532693
这个作者很懒,什么都没留下…
展开
-
Microsoft Avro简介及配置实战
一、引言1、 简介Avro是Hadoop中的一个子项目,也是Apache中一个独立的项目,Avro是一个基于二进制数据传输高性能的中间件。在Hadoop的其他项目中例如HBase(Ref)和Hive(Ref)的Client端与服务端的数据传输也采用了这个工具。Avro是一个数据序列化的系统。Avro 可以将数据结构或对象转化成便于存储或传输的格式。Avro设计之初就用来支持数据密集转载 2015-08-28 13:22:35 · 727 阅读 · 0 评论 -
千兆网卡如何才能达到全速
1000Mb网卡如何才能跑满,跑到100%?伦理片 http://www.gxuy.com/千兆网卡理论最大传输速度是(1024Mbit/s=128MByte/s),注意b与B差了8倍。要想达到最大传输速度要满足三个条件 : 1、 使用超五类双绞线,线序没什么变化,是568B。2、 把电脑BIOS的SATA选项的转载 2015-08-30 12:57:49 · 2037 阅读 · 0 评论 -
服务过程中会遇到的问题
服务化,也可以叫SOA,但在我们还是尽量避免用这个词, 因为它被炒得太热,一味的套SOA的概念,容易迷失原有的方向。 伦理片 http://www.gxuy.com/要向服务化推进,当然就需要搭建一些基础设施,来协助这个过程的实现, 那都有哪个方面的工作要做呢,这里把我暂时想到的列一列。 1. 服务的定义 服务提供者要怎么暴露一个服务?服务消费者要怎么引用一个服务?转载 2015-08-29 11:53:14 · 889 阅读 · 0 评论 -
NFS、NAS、SAN、Squid、LVS
NFS简介----------------------------------------------------NFS是Network File System的简写,即网络文件系统.网络文件系统是FreeBSD支持的文件系统中的一种,也被称为NFS. NFS允许一个系统在网络上与他人共享目录和文件。通过使用NFS,用户和程序可以像访问本地文件一样访问远端系统上的文件。转载 2015-08-30 12:40:12 · 321 阅读 · 0 评论 -
TFS(Taobao File System)Java Client 使用经验
TFS Java客户端的说明 伦理片 http://www.gxuy.com/tfs-client-java版本选择:---------------------------------------tfs-client-java的版本有:release-2.0.0/ tfs-with-large-2.1.1/tfs-client-java-2.1.转载 2015-08-30 12:36:41 · 636 阅读 · 0 评论 -
五种开源协议的比较(BSD,Apache,GPL,LGPL,MIT) – 整理
当Adobe、Microsoft、Sun等一系列巨头开始表现出对”开源”的青睐时,”开源”的时代即将到来!最初来自:sinoprise.com/read.php?tid-662-page-e-fpage-1.html(遗憾的是这个链接已经打不开了),我基本未改动,只是进行了一些排版和整理。现今存在的开源协议很多,而经过Open Source Initiative组织通过批准的开转载 2015-08-29 11:52:01 · 421 阅读 · 0 评论 -
浅谈RAID写惩罚(Write Penalty)与IOPS计算
介绍通常在讨论不同RAID保护类型的性能的时候,结论都会是RAID-1提供比较好的读写性能,RAID-5读性能不错,但是写入性能就不如RAID-1,RAID-6保护级别更高,但写性能相对更加差,RAID10是提供最好的性能和数据保护,不过成本最高等等。其实决定这些性能考虑的因素很简单,它就是RAID Write Penalty(写惩罚)。本文从原理上解释了不同RAID保护级别的写惩罚,转载 2015-08-29 11:44:13 · 378 阅读 · 0 评论 -
TFS(Taobao File System)配置dataServer、分区、挂载数据盘
目前的情况,tfs安装在/usr/local/tfs/在 /usr/local/tfs/conf/目录,共有三个文件需要配置:ns.conf、ads.conf和ds.conf 各个文件功能ns.conf用于配置nameserver,ds.conf用于配置dataserver,ads.conf为可选配置文件,用于配置nameserver和dataserver地址信息,可用于快速启转载 2015-08-30 12:39:02 · 339 阅读 · 0 评论 -
互联网网站架构升级----消息中间件的实现方案
消息中间件对目前大中型互联网来说是非常重要的,在业务数据流动中仅次于RPC服务调用,担负着越来越复杂的网站业务从主流程上解耦的重要责任;伦理片 http://www.gxuy.com/ 从目前互联网对消息中间件的需求来看应该分为两种类型,一种是和钱相关的需求,一种是和钱无关的需求;和钱相关的需求消息的可靠性是放在第一位的,和钱无关的需求是速度放在第一位的,但这两种需求又是矛盾的,很难转载 2015-08-29 11:54:50 · 320 阅读 · 0 评论 -
分布式日志收集系统Apache Flume的设计介绍
概述Flume是Cloudera公司的一款高性能、高可能的分布式日志收集系统。现在已经是Apache Top项目。Github地址。同Flume相似的日志收集系统还有Facebook Scribe,Apache Chuwka,Apache Kafka(也是LinkedIn的)。Flume是后起之秀,本文尝试简要分析Flume数据流通过程中提供的组件、可靠性保证来介绍Flume的主要设计,不转载 2015-08-28 13:20:16 · 262 阅读 · 0 评论 -
压力测试工具ab,webbench,Siege,http_load,Web Application Stress
压力测试工具----------------------------------------------------------------------------伦理片 http://www.dotdy.com/Linux下四款Web服务器压力测试工具(http_load、webbench、ab、siege)介绍----------------------------转载 2015-09-04 03:30:02 · 425 阅读 · 0 评论