集群/云
文章平均质量分 77
cuijinquan
这个作者很懒,什么都没留下…
展开
-
CentOS 6.3下部署LVS(NAT)+keepalived实现高性能高可用负载均衡
CentOS 6.3下部署LVS(NAT)+keepalived实现高性能高可用负载均衡一、简介VS/NAT原理图:二、系统环境实验拓扑:系统平台:CentOS 6.3Kernel:2.6.32-279.el6.i686LVS版本:ipvsadm-1.26keepalived版本:keepalived-1.2.4三、安装0、安转载 2013-12-08 18:14:29 · 634 阅读 · 0 评论 -
云梯的多NameNode和跨机房之路
2013年4月,阿里云梯集群所在的数据中心(IDC机房)的机位已满,无法继续扩充集群。根据当时阿里集团数据量的增长趋势,在可以预见的很短时间内,集群规模将因为机房机位不足而无法继续扩充。由于当时云梯的Hadoop版本还不支持单集群跨机房分布的功能,所以阿里集团的大数据业务 将因为集群规模的限制而停止发展。云梯的跨机房项目就在这种背景下开始的。目标非常明确:构建一个支持跨机房的Hadoop集转载 2014-01-21 00:15:19 · 663 阅读 · 0 评论 -
深入剖析阿里巴巴云梯YARN集群
阿里巴巴作为国内使用Hadoop最早的公司之一,已开启了Apache Hadoop 2.0时代。阿里巴巴的Hadoop集群,即云梯集群,分为存储与计算两个模块,计算模块既有MRv1,也有YARN集群,它们共享一个存储HDFS集 群。云梯YARN集群上既支持MapReduce,也支持Spark、MPI、RHive、RHadoop等计算模型。本文将详细介绍云梯YARN集群的 技术实现与发展状况转载 2014-01-21 00:16:56 · 596 阅读 · 0 评论 -
互联网百万级应用的大数据处理问题 探讨大数据量处理
我说的大数据量处理是指同时需要对数据进行检索查询,同时有高并发的增删改操作。记得以前在XX做电力时,几百万条数据,那时一个检索查询可以让你等你分钟。现在我是想探讨下对大数据量的处理,那时我就在想例如腾讯,盛大,动辄数以亿计的帐号,怎么能这么快呢, 于是找到了互联网现在对数据处理的发展。对于大数据量处理,如果是互联网处理的话,一般分为下面阶段:第一阶段,所有数据都装入一个数据库,当数转载 2014-01-14 23:58:20 · 1377 阅读 · 0 评论 -
Apache与JBoss AS 5 HTTP集群配置
Apache与JBoss AS 5 HTTP集群配置所需组件Apache 2.2.22mod_jk 1.2.3JBOSS 5.1.0GA安装步骤安装Apache2.2.22将mod_jk-1.2.30-httpd-2.2.3.so重命名为mod_jk.so,复制到%APACH_HOME%/modules解压缩jboss 5.1.0.GA转载 2014-01-12 00:32:30 · 595 阅读 · 0 评论 -
squid 2.7通过域名反向代理多个服务器配置
squid 2.7通过域名反向代理多个服务器配置 visible_hostname squid1.abc.com#设定squid的主机名,如无此项squid将无法启动http_port 80 accel vhost vport#设定squid为accel加速模式,vhost必须要加.否则将无法将主机头转发至后端服务器,访问时就会转载 2014-01-10 17:02:57 · 2265 阅读 · 0 评论 -
跨平台P2P开源软件AllJoyn学习文档
AllJoyn是一个开放源码的软件系统,它为分布式应用程序在不同设备中提供了运行环境,特别是移动性、安全性和动态配置。AllJoyn系统处理了异构分布式系统中固有的难题,并解决了将移动性引入方程时所产生的独特问题。这使得应用开发人员可以将注意力集中到应用程序的核心问题上了。AllJoyn是一个“中性平台”,它被设计为相对于它运行的具体操作系统、硬件和设备尽可能的独立。事实上,AllJoyn是在Mi转载 2013-12-28 12:47:41 · 683 阅读 · 0 评论 -
memcached实现分布式数据存储
1 通过设置特效key前缀来实现分布,基本上可以实现memcached和key的一对多关系,好处在与不会混淆如: 1 号服务器 192.168.1.12 号服务器 192.168.1.2 如果 缓存键 以 en 开头的就存在 1号 缓存键 以ch 开头的就存在2号 2 根据余数计算分散:转载 2013-12-12 14:51:38 · 413 阅读 · 0 评论 -
Memcached 集群架构方面的问题
这里收集了经常被问到的关于memcached的问题memcached是怎么工作的?memcached最大的优势是什么?memcached和MySQL的query cache相比,有什么优缺点?memcached和服务器的local cache(比如PHP的APC、mmap文件等)相比,有什么优缺点?memcached的cache机制是怎样的?memcached如何实转载 2013-12-12 14:53:13 · 418 阅读 · 0 评论 -
说说大型高并发高负载网站的系统架构(更新)
转载请保留出处:俊麟 Michael’s blog (http://www.toplee.com/blog/?p=71)Trackback Url : http://www.toplee.com/blog/wp-trackback.php?p=71 鄙人先后在CERNET做过拨号接入,在Yahoo&3721搞过搜索前端,在猫扑处理过mop.com的架构升级,在6.cn视频网站从事开发转载 2013-12-12 14:49:35 · 821 阅读 · 0 评论 -
RHEL 5.4下部署LVS(DR)+keepalived实现高性能高可用负载均衡
RHEL 5.4下部署LVS(DR)+keepalived实现高性能高可用负载均衡一、简介LVS是Linux Virtual Server的简写,意即Linux虚拟服务器,是一个虚拟的服务器集群系统。本项目在1998年5月由章文嵩博士成立,是中国国内最早出现的自由软件项目之一。目前有三种IP负载均衡技术(VS/NAT、VS/TUN和VS/DR);十种调度算法(rr|wr转载 2013-12-08 18:13:41 · 596 阅读 · 0 评论