构建ceph deb 安装包

一、编译ceph包
1.1.克隆ceph代码，切换分支

git clone --recursive https://github.com/ceph/ceph.git
cd ceph
git checkout v0.94.3 -f

备注：recursive会把子模块一起克隆

1.2.安装依赖包

./install-deps.sh
./autogen.sh

1.3.编译前配置

./configure      --prefix=/  

  注意：这里如果不配置--prefix选项，所有程序默认安装在/usr/local下面，在后面可能会涉及到路径的问题  

1.4.编译

make -j 4

通过如下命令确定总核数

cat /proc/cpuinfo | grep cores

1.5.构建 Ceph deb安装包

apt-get install debhelper
dpkg-buildpackage -j8 2>err0813dpkg.txt

1.6.编译完毕后，会有以下包存在

  二、制作deb包本地安装源
2.1.安装dpkg-scanpackages命令

apt-get install dpkg-dev

2.2 创建ceph软件包目录

mkdir  /home/ceph-hammer
cd  /home/ceph-hammer
mkdir pools
mkdir -p dists/trusty/main/binary-i386
mkdir -p dists/trusty/main/binary-amd64

备注：pools 为软件包存放的物理地址

2.3 拷贝ceph软件包到pools

cp *.deb /home/ceph-hammer/pools

2.4 生成override 文件
把pools目录下所有的deb包包名写入文件override中

ls -1 pools | sed 's/_.*$/ extra BOGUS/' | uniq > override

2.5生成Packages
把所有包的包名、版本号、依赖关系等信息写入文件Packages中

dpkg-scanpackages pools override > dists/trusty/main/binary-i386/Packages
dpkg-scanpackages pools override > dists/trusty/main/binary-amd64/Packages

备注：etch版本中要把Packages文件变成Packages.gz文件

2.6 更改sources.list

echo "deb file:///home/ceph-hammer trusty main " >> /etc/apt/sources.list

注意：由于ceph-deploy1.5 默认会连接网络下载最新的版本，所以在这边的配置，似乎不太起作用。

2.7 本地安装源目录结构

创建完本地安装源后，目录结构如下所示：

 
2.8设置完成，更新deb源
完成以上设置和文件复制之后，就可以开始正常使用本地的源了和使用网络上的源一样操作。

apt-get update
apt-get dist-upgrade

三、安装ceph
3.1 安装前准备
关闭ubuntu的packages 认证功能，否则会报The following packages cannot be authenticated!

echo "APT::Get::AllowUnauthenticated 1 ;" | sudo tee -a  /etc/apt/apt.conf

3.1.安装并更改ceph-deploy 
1.在ceph01安装ceph-deploy

apt-get install ceph-deploy

2. 修改install.py文件
在通过ceph-deploy安装ceph节点时(即ceph-deploy install monitor)，会调用ceph-deploy的install.py，而此时会使用该脚本连接网络下载deb包，由于使用本地源，故需修改 install.py中deb包下载的路径。
install.py位置：/usr/lib/python2.7/dist-packages/ceph_deploy/hosts/debian/install.py
修改如下：
修改前
---------------------------
 32         if version_kind == 'stable':
 33             url = 'http://ceph.com/debian-{version}/'.format(
 34               version=version,
 35                 )
 36         elif version_kind == 'testing':
 37             url = 'http://ceph.com/debian-testing/'
---------------------------


修改后：
---------------------------
 32         if version_kind == 'stable':
 33            # url = 'http://ceph.com/debian-{version}/'.format(
 34             url = 'file:///home/ceph-{version}/'.format(
 35                 version=version,
 36                 )
 37         elif version_kind == 'testing':
 38             url = 'http://ceph.com/debian-testing/'
---------------------------
3.2 安装ceph

见ceph官方文档

四、所遇问题
问题1：
执行ceph-deploy install ceph01 报以下错误：
[ceph01][DEBUG ] The following packages have unmet dependencies:
[ceph01][DEBUG ]  ceph : Depends: liblttng-ust0 (>= 2.5.1-1ubuntu2~cloud0) but 2.4.0-4ubuntu1 is to be installed
[ceph01][DEBUG ]         Depends: librados2 but it is not going to be installed
[ceph01][DEBUG ]  ceph-common : Depends: librbd1 (= 0.94.7-1) but it is not going to be installed
[ceph01][DEBUG ]                Depends: librados2 but it is not going to be installed
[ceph01][DEBUG ]                Depends: python-rados (= 0.94.7-1) but it is not going to be installed
[ceph01][DEBUG ]                Depends: python-rbd (= 0.94.7-1) but it is not going to be installed
[ceph01][DEBUG ]  ceph-mds : Depends: librados2 but it is not going to be installed
 

原因及解决过程：
执行 apt-get install librados2报
librados2 : Depends: liblttng-ust0 (>= 2.5.1-1ubuntu2~cloud0) but 2.4.0-4ubuntu1 is to be installed
E: Unable to correct problems, you have held broken packages.
用apt-cache show liblttng-ust0 查看发现环境中安装的版本是2.4.0-4ubuntu1，而librados2需要安装2.5.1-1ubuntu2的版本，因此报错。

解决：
1.下载liblttng-ust0_2.5.1-1ubuntu2_amd64.deb
liblttng-ust-ctl2_2.5.1-1ubuntu2_amd64.deb和
liburcu2_0.8.4-6ubuntu1_amd64.deb
三个deb包
（下载地址：
liblttng-ust0_2.5.1-1ubuntu2_amd64.deb
liblttng-ust-ctl2_2.5.1-1ubuntu2_amd64.deb
https://mirror.umd.edu/ubuntu/pool/main/u/ust/
liburcu2_0.8.4-6ubuntu1_amd64.deb
https://launchpad.net/ubuntu/vivid/amd64/liburcu2/0.8.4-6ubuntu1）
放入deb包本地安装源目录。

执行

dpkg-scanpackages pools override > dists/trusty/main/binary-amd64/Packages

更新Packages.gz包


问题2
ceph-deploy安装我自己编译的deb包，报错WARNING: The following packages cannot be authenticated!
解决方案：
关闭ubuntu的packages 认证功能：

echo "APT::Get::AllowUnauthenticated 1 ;" | sudo tee -a  /etc/apt/apt.conf

参考资料：
1.Debian Linux操作系统下本地源的安装方法
http://soft.zdnet.com.cn/software_zone/2007/1006/536773.shtml
2. CentOS6.5 本地源搭建Ceph
http://www.cnblogs.com/linprogram/p/5482513.html