2018年12月_smart9527_zc

原创 Linux----Linux入门简介

一、什么是Linux 在Linux系统中，这4个部分各自承担着不同的责任，每个部分都是不可或缺的。Linux系统如图所示：1、Linux简介 Linux是一套免费使用和自由传播的类Unix操作系统，是一个基于POSIX和UNIX的多用户、多任务、支持多线程和多CPU的操作系统。它能运行主要的UNIX工具软件、应用程序和网络协议。它支持32位和64位硬件。Li...

2018-12-31 23:00:47 376

原创 Ceph对象存储（一）

一、Ceph RADOS组成1、OSDs，负责存储所有的Objects数据；2、Monitor，保存集群中所有OSDs状态信息，以及负责管理Cluster Map，其中Cluster Map是整个RADOS系统的关键数据结构，管理集群中的所有成员、关系、属性等信息以及数据的分发。多Monitor时，使用paxos算法来选择leader，避免单点故障；二、RADOS 系统逻辑结构...

2018-12-31 15:14:28 1636

原创 Ceph性能优化

一、硬件选型（1）服务器1GHz CPU per OSD （the more the better）1GB RAM per OSD1GHz CPU*4 per MON4GB RAM per MON（2）硬盘SSD、HDD配比1:3~5 （推荐使用Intel DC 3700或同等级以上SSD）每个物理节点OSD数量最好控制在单机最大网络带宽以内（...

2018-12-31 13:56:10 2460 1

原创 Ceph与openstack的集成

一、openstack简介1、Openstack是一个IaaS平台管理解决方案2、OpenStark是由网络主机服务商Rackspace和美国宇航局联合推出的一个开源项目，目的是制定一套开源软件标准，任何公司或个人都可以搭建自己的云计算环境（IaaS），从此打破了Amazon等少数公司的垄断，意义非凡。3、OpenStack由一系列的子项目组成: Identity ...

2018-12-28 22:28:18 329

原创 Ceph---内部原理以及crush设计

一、ceph对象（1）ceph objectObject由数据和元数据构成每个object都有全局唯一的ID 不同于文件存储，object的大小可以突破文件级的限制，并且还有丰富的元数据整个Object索引是一个扁平结构里实现的，不同于传统文件系统的树状结构（2）查看object查看pool$:rados lspool查看pool里的objectrado...

2018-12-28 15:31:19 1570 1

原创 Centos 7如何实现NFS共享服务

一、环境说明主机名 ip ios 角色 smart 10.2.152.152 centos-7.1（x86） client arm-251 10.2.152.251 centos-7.4（aarch64） service 二、安装软件包（1）服务器和客户机都要安装nfs 和 rpcbind 软件包$:yum -y in...

2018-12-23 20:20:57 362

原创 Ceph-集群监控

一、监控ceph集群（1）检查集群健康状态$:ceph health$:ceph health detail //信息更详细（2）监控集群事件$:ceph -w监控详细的集群事件--watch-debug: This is used to watch debug events--watch-info: This is used to watch in...

2018-12-22 23:23:55 720

原创 Centos-7 5节点 MPI集群配置

一、环境说明主机名 IP 内存 IOS 硬盘 CPU核数 hw-master 10.2.152.230 512G Centos-7.5 2*6T 6...

2018-12-21 21:52:19 1928

原创 ceph集群的监控和故障排除

一、服务管理（1）Sysinit（Centos）命令格式：/etc/init.d/ceph [options] [command] [daemons] 示例： /etc/init.d/ceph start mon #启动mon /etc/init.d/ceph start osd.0 #启动osd.0 /etc/ini...

2018-12-21 09:15:24 1336

原创 Ceph-------存储提供

一、Ceph存储介绍向物理机和虚拟机供应存储统一存储，同时提供对象、块以及文件的功能（1）、块设备通过Ceph clients使用块设备精简配置动态扩容快照、克隆写时拷贝技术 caching（缓存） Rbd驱动已...

2018-12-16 23:38:12 296

原创初识ceph（分布式文件系统）

一、ceph的由来 Linux持续不断进军可扩展计算空间，特别是可扩展存储空间。Ceph 最近加入到 Linux 中令人印象深刻的文件系统备选行列，它是一个分布式文件系统，能够在维护 POSIX 兼容性的同时加入了复制和容错功能。其命名和UCSC（Ceph 的诞生地）的吉祥物有关，这个吉祥物是 “Sammy”，一个香蕉色的蛞蝓（就是蜗牛<..>），就是...

2018-12-15 21:36:25 3328 2

原创 centos 7-aarch64如何替换yum源

一、进入yum.repo.d[root@node-01 ~]# cd /etc/yum.repos.d/[root@node-01 yum.repos.d]# lsCentOS-Base.repo CentOS-Sources.repo二、备份原yum源[root@node-01 yum.repos.d]# mkdir yum-back[root@node-01 yu...

2018-12-12 17:29:08 17938 14

原创块存储、文件存储、对象存储三者的本质区别

一、什么叫做块级？什么叫文件级（1）、块级概念：块级是指以扇区为基础，一个或多个连续的扇区组成一个块，也叫物理块。它是在文件系统与块设备（例如：磁盘驱动器）之间。（2）、文件级概念：文件级是指文件系统，单个文件可能由于一个或多个逻辑块组成，且逻辑块之间是不连续分布。逻辑块大于或等于物理块整数倍。（3）、物理块与文件系统之间的关系图...

2018-12-12 12:53:46 537

原创 ARM环境下centos 7源码编译安装ceph-v14.0.1教程（待修改）

一、环境介绍IP hostname IOS 10.2.152.131 node-01 centos 7.4 admin 10.2.152.132 node-02 centos 7.4 node 二、安装CMake-v3.12.4下载源码$: wget https://github.com/Kitware/CMa...

2018-12-09 17:30:20 3011 1

转载 Linux系统的根目录(/)的意义与内容

一、Linux Linux和UNIX的文件系统是一个以“/ “为根的阶层式的树状文件结构，/ 因此被称为根目录。所有的文件和目录都置于根目录/ 之下。根目录/下面有/bin，/home，/usr等子目录。FHS标准建议：根目录(/)所在分区应该越小越好，且应用程式所安装的软体最好不要与根目录放在同一个分区内，以保持根目录越小越好。Linux哲学思想 1.一切皆文件；...

2018-12-08 22:14:56 1868

原创 centos 7-x86如何yum安装ceph-v11.2.1+图形监控

一、安装环境IP hostname IOS 10.2.151.230 centos-2683 centos 7.4 master 10.2.151.131 x86-131 centos 7.4 node 二、ceph搭建准备（1）关闭selinux和防火墙...

2018-12-08 21:24:54 379

原创如何在centos上搭建spark-1.6.1

一.环境说明： ARM架构的centos 7.4操作系统IP hostname ios 10.2.152.230 hw-master centos 7.4 二.安装maven-3.5.3（1）下载maven-3.5.3并解压到/usr/local/maven $:mkdir -p /usr/loc...

2018-12-07 19:37:29 154

smart9527_zc的博客