自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(18)
  • 资源 (8)
  • 收藏
  • 关注

转载 ceph iscsi gateway ceph原生的ISCSI

今天我们来体验下Ceph原生的ISCSI,可能会有人说哪来的原生ISCSI啊,相信细心的童鞋在Ceph L版本发布的时候官网手册里面就出现了一个iscsi的字样。是的,没错,这就是原声版的ISCSI雏形,有好消息就有坏消息,不幸的是,截至到目前为止还不能使用rpm安装,因为红帽没有把rpm释放出来,只能通过git源码或别人分享的rpm包进行安装。 简单来说下iscsi的前生今世,分为两种一...

2018-11-29 09:22:24 3425

转载 ceph磁盘读写测试的一些工具

ceph--磁盘和rbd、rados性能测试工具和方法我在物理机上创建了5台虚拟机,搭建了一个ceph集群,结构如图:具体的安装步骤参考文档:http://docs.ceph.org.cn/start/                                http://www.centoscn.com/CentosServer/test/2015/0521/5489.ht...

2018-11-26 17:55:14 4502

转载 ceph PG状态及部分故障(状态)模拟

1. PG介绍这次主要来分享Ceph中的PG各种状态详解,PG是最复杂和难于理解的概念之一,PG的复杂如下:- 在架构层次上,PG位于RADOS层的中间。a. 往上负责接收和处理来自客户端的请求。b. 往下负责将这些数据请求翻译为能够被本地对象存储所能理解的事务。- 是组成存储池的基本单位,存储池中的很多特性,都是直接依托于PG实现的。- 面向容灾域的备份策略使...

2018-11-20 11:00:49 8044 1

转载 ceph快照原理

http://www.sysnote.org/2016/02/28/ceph-rbd-snap/前段时间一直在研究ceph的快照以及其所涉及的故障恢复逻辑,ceph在这部分的实现挺精妙的,虽然也是基于COW实现的,但是细细品来,其在快照的元数据管理以及父子关系的维护上有独到之处,本文将详细阐述快照的实现原理以及快照对象在恢复时如何至关重要的作用。1.rbd快照的直观理解ceph的rbd...

2018-11-19 09:02:08 4743 3

转载 存储分类及对象存储osd的技术原理

什么是对象存储(OSD)?存储局域网(SAN)和网络附加存储(NAS)是我们比较熟悉的两种主流网络存储架构,而对象存储(Object-based Storage)是一种新的网络存储架构,基于对象存储技术的设备就是对象存储设备(Object-based Storage Device)简称OSD。对象存储的发展历史:1999年成立的全球网络存储工业协会(SNIA)的对象存储设备(Object S...

2018-11-07 11:23:24 20878 1

转载 图文并茂raid技术详解(raid大全)

RAID 技术相信大家都有接触过,尤其是服务器运维人员,RAID 概念很多,有时候会概念混淆。这篇文章为网络转载,写得相当不错,它对 RAID 技术的概念特征、基本原理、关键技术、各种等级和发展现状进行了全面的阐述,并为用户如何进行应用选择提供了基本原则,对于初学者应该有很大的帮助。一、RAID 概述  1988 年美国加州大学伯克利分校的 D. A. Patterson 教授等首次在论文...

2018-11-06 15:27:46 20741

转载 Linux--vim操作命令(全)

vim常用命令总结 (转)  在命令状态下对当前行用== (连按=两次), 或对多行用n==(n是自然数)表示自动缩进从当前行起的下面n行。你可以试试把代码缩进任意打乱再用n==排版,相当于一般IDE里的code format。使用gg=G可对整篇代码进行排版。   vim 选择文本,删除,复制,粘贴   文本的选择,对于编辑器来说,是很基本的东西,也经常被...

2018-11-05 20:06:55 13849 1

原创 【详细齐全】FIO使用方法 及参数解析(文章末尾)

linux 使用FIO测试磁盘iops 方法详解FIO是测试IOPS的非常好的工具,用来对硬件进行压力测试和验证,支持13种不同的I/O引擎, 包括:sync,mmap, libaio, posixaio, SG v3, splice, null, network, syslet, guasi, solarisaio 等等。fio 官网地址:http://freshmeat.net/pr...

2018-11-03 17:44:49 28035 1

转载 PG如何影响数据分布

引言有位朋友(下文简称小明)的集群OSD数据分布很不均匀,最多的OSD已经被使用了90%,而最少的才用了40%,这种现象的原因基本上可以确定为PG总数设置少了,再加上经常有朋友会问及到每个Pool的PG数该怎么设置,我这里就说下PG对数据分布的影响。因为怎么做官网的pg计算器已经讲得很明确了,我主要想介绍下为什么要这么做。实验环境准备这里我完全重搭建出了小明的集群环境,需要他提...

2018-11-01 21:18:41 1039

转载 大话Ceph--PG那点事儿

引言PG,Placement Group,中文翻译为归置组,在ceph中是一个很重要的概念,这篇文章将对PG进行深入浅出的讲解。PG是什么PG就是目录!我事先搭建了一个3个host, 每个host有3个OSD的集群,集群使用3副本,min_size为2。集群状态如下:   1 2 3 4 5 6 7...

2018-11-01 21:16:36 7748 1

转载 大话Ceph--RBD那点事儿

引言这篇文章主要介绍了RBD在Ceph底层的存储方式,解释了RBD的实际占用容量和RBD大小的关系,用几个文件的例子演示了文件在RBD(更恰当的是xfs)中的存储位置,最后组装了一个RBD,给出了一些FAQ。RBD是什么RBD : Ceph’s RADOS Block Devices , Ceph block devices are thin-provisioned, resizab...

2018-11-01 21:08:20 10868

转载 大话Ceph--CRUSH那点事儿(ceph存储流程原理简析)

引言那么问题来了,把一份数据存到一群Server中分几步?Ceph的答案是:两步。 计算PG 计算OSD 计算PG首先,要明确Ceph的一个规定:在Ceph中,一切皆对象。不论是视频,文本,照片等一切格式的数据,Ceph统一将其看作是对象,因为追其根源,所有的数据都是二进制数据保存于磁盘上,所以每一份二进制数据都看成一个对象,不以它们的格式来区分他们。那...

2018-11-01 21:05:42 1415 3

转载 玩转 Ceph 的正确姿势

玩转 Ceph 的正确姿势本文先介绍 Ceph, 然后会聊到一些正确使用 Ceph 的姿势;在集群规模小的时候,Ceph 怎么玩都没问题;但集群大了(到PB级别),这些准则可是保证集群健康运行的不二法门;Ceph 最初的目标是做一个分布式文件系统,直到现在这个目标也不能算完美实现;目前官网上对它的文件系统还是谨慎推荐的态度(不建议对线上核心业务部署);业界使用 Ceph ,大多是用它的对...

2018-11-01 20:52:18 455

转载 浅谈分布式存储系统中的数据一致性要求(关于存储的一些好文转载--5)

前言分布式存储是近几年的热门话题之一,它和传统SAN/NAS存储的区别是,分布式存储使用标准硬件(比如x86服务器和10GbE网络),而传统SAN/NAS存储使用的是专有硬件。使用标准硬件的好处是通用,不会受限于产商,而且成本上也更便宜,还可以做到按需扩容。存储系统有一大铁则,即非不可抗力情况下不能发生数据丢失,亦即要求数据可靠一致——这往往也被称之为存储系统的生命线或底线。分布式存储因物...

2018-11-01 20:24:21 2023

转载 下一代云存储系统技术白皮书(关于存储的一些好文转载--3)

1 下一代云存储系统简介 1.1云存储系统简介信息处理技术、互联网技术、云计算技术的诞生与成长对各行各业产生着潜移默化的影响。互联网时代,数据采集手段纷繁复杂,形态五花八门,半结构化与非结构化数据体量日趋增大,传统的储架构已经逐渐显现出自身的固有局限。在传统数据中心中,以OLTP和OLAP为代表的数据库应用占据了昂贵但又低效率的在线存储设施,交易记录、分析性数据则消耗了大量的后端存储空...

2018-11-01 20:20:03 2490

转载 如何做数据存储架构技术选型?(关于存储的一些好文转载--4)

在互联网应用中,数据爆发式的增长,实际上软件架构的本质就是对数据的维护。对数据的操作可以归纳为三类:读、写和检索。随着网站的流量越来越大,数据量也爆发式的增长,网站响应越来越慢,服务器经常宕机。传统的关系型数据库已经不能满足流量和数据的爆发式增长。于是根据不同的业务需求,出现了很多不同的数据库。根据数据库的类型划分。有关系型数据库:mysql,oracle,sqlserver,postgr...

2018-11-01 20:18:25 1504

转载 关于云存储系统的六大技术分析(关于存储的一些好文转载--2)

随着监控领域的飞速发展,新技术的诞生也是接踵而至,云存储是人们最为乐道的高新技术产品。它具有如下几大主要的技术。云存储系统具有如下特点:数据安全,超强的可扩展性,按照使用收费,可跨不同应用,自动切换故障,易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。云存储是在云计算概念上延伸和发展出来的一个新概念,是指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类...

2018-11-01 20:16:17 805

转载 关于分布式存储,这是你应该知道的(图文详解)(关于存储的一些好文转载--1)

转自:http://stor.51cto.com/art/201711/556946.htm关于分布式存储,这是你应该知道的(图文详解)前言分布式存储存在的风险,其实就是因为“共享”、“大数据量”、“高性能”和X86服务器+廉价的磁盘为载体之间的矛盾所产生的,不是有些读者说的“数据架构”的问题。其实任何存储都存在这个问题,只是分布式存储更严重。本文其实是从主机的网络、磁盘的吞吐角度...

2018-11-01 20:13:35 9023

python_swiftclient-3.10.1-py2.py3-none-any.whl

python-swiftclient标准库,此文件是最新的whl文件,下载后直接使用pip install 指定文件即可完成安装,

2020-09-13

The swiftclient API.pdf

是使用及学习swift ceph存储接口的有用api文档,此文档是由openstack官方文档翻译而来,是通过python标准库的方式调用swift接口进行ceph对象存储测试的不二选择

2020-09-13

swift CLI - 中文.pdf

python-swiftclient中文详细文档,文档中描述了cli使用的详细解释及举例说明,是使用swift接口进行存储ceph进行对象测试的非常有用的文档

2020-09-13

swift CLI - 中文.docx

python-swiftclient中文详细文档,文档中描述了cli使用的详细解释及举例说明,是使用swift接口进行存储ceph进行对象测试的非常有用的文档

2020-09-13

RF工程创建及脚本编写指导.pdf

RF是RobotFrameWork的简称,一个以python为底层语言编写的自动化测试框架,因其自带很多已经编好的类库,能够很好地适应不同python基础的人来学习及使用,甚至不懂python都可以完成脚本编写

2020-08-21

RF工程创建及脚本编写指导.docx

Word文档,用于RobotFrameWork框架自动化入门从无到有的过程,系统的讲解了框架构成及模块功能到脚本编写的全流程。

2020-08-21

存储简析培训资料.pdf

关于存储的培训入门级资料,解释了存储的分类,原理简析等

2018-11-09

ceph命令文档,不是很全请谅解

ceph分布式存储实战属于当前云计算存储的领先模块,其讲述分布式存储环境搭建到实战全内容操作命令大全,有助于快速上手使用ceph存储技术

2018-10-07

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除