分布式
文章平均质量分 88
0春华秋实
这个作者很懒,什么都没留下…
展开
-
Hadoop单机模式环境搭建关键步骤
Hadoop环境需要sshd服务一直开启,故,在服务器上需要按照ssh服务,以Ubuntu Linux为例,按照ssh服务如下: sudo apt-get install ssh sudo apt-get install rsync 编辑HADOOP_HOME/conf/hadoop-env.sh文件,将JAVA_HOME设置为Java安装路径。 Hadoop的集群分为三种模式:原创 2012-08-13 15:07:23 · 568 阅读 · 0 评论 -
【转】可扩展Web架构与分布式系统
开放源代码已经成为一些大型网站的基本原则。而在这些网站成长的过程中,一些优秀的实践经验和规则也出现在他们的结构中。本文旨在介绍一些在大型网站结构设计的过程中需要注意的关键问题以及实现目标的基础工作。 本文侧重于介绍网络系统,尽管一些准则在其他分布式系统中也是适用的。 1.1. web分布式系统的设计原则 搭建和运营一个可伸缩的web站点或者应用程序意味着什么?在原始层面上这仅仅是转载 2013-04-02 23:01:32 · 600 阅读 · 0 评论 -
转一篇不错的一致性Hash的文章
原文地址:http://zha-zi.iteye.com/blog/1260377 consistent hashing 算法早在 1997 年就在论文 Consistent hashing and random trees 中被提出,目前在cache 系统中应用越来越广泛; 1 基本场景 比如你有 N 个 cache 服务器(后面简称 cache ),那么如何将一个转载 2013-08-02 15:23:31 · 410 阅读 · 0 评论 -
Hadoop环境搭建之初体验
0、版本 搭建Hadpp的版本为1.2.1 下载地址为:http://apache.fayea.com/apache-mirror/hadoop/common/hadoop-1.2.1/ 1、登录验证 (1)、确定系统是否安装了ssh和ssh-keygey 可以通过which命令来确认 which ssh which ssh-keygen 如果出现 /usr/bin原创 2013-12-23 17:46:41 · 702 阅读 · 0 评论