![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
分布式存储
文章平均质量分 72
xwsiat
业余程序员
展开
-
安装分布式文件系统的一点心得
由于工作需要,我曾经多次安装配置过一些开源的分布式文件系统,涉及的节点也超过10台较好配置的物理机,并进行了性能测试。 涉及的分布式文件系统有moosefs,glusterfs,ceph和最常见的HDFS, 从刚开始安装配置的一头雾水到现在 安装配置相对比较熟练,这个过程中有些小感悟,希望对新手有些小帮助: 一,宏观上的把握 在安装系统前,首先要弄清楚这样一个问题,我的分布式系统涉及哪些进程原创 2013-09-02 13:31:39 · 1048 阅读 · 0 评论 -
配置glusterfs 支持MapReduce 计算
前言 hdfs存储系统原生支持mapreduce计算框架,但是其对外提供的访问接口并不支持严格POSIX语义,通俗点讲就是不能直接支持其他应用,例如HDFS不能够直接文件服务器,web服务器的存储系统。尽管后续的一些模块 如fuse-dfs,webdav等尝试为HDFS提供标准接口的存储系统,但是经过多个组件的转化,存储系统效率受到了极大的影响。 一方面,考虑到存储系统和原创 2013-10-23 21:11:39 · 758 阅读 · 0 评论 -
Mapreduce计算框架涉及的技术(3)--以多视图方式看mapreduce
图 1 jiedian原创 2014-09-04 14:29:36 · 677 阅读 · 0 评论 -
Mapreduce计算框架涉及的技术(1)-从单节点单进程到多节点多进程
一,三个简单的程序场景原创 2014-08-21 20:01:23 · 1415 阅读 · 0 评论