KubeFlow安装指南

【摘要】 Kubeflow是Google推出的基于kubernetes环境下的机器学习组件，通过Kubeflow可以实现对TFJob等资源类型定义，可以像部署应用一样完成在TFJob分布式训练模型的过程。

 

 

组件

http://pachyderm.io/ 

http://www.argoproj.io/

Kubeflow使用场景

• 希望训练tensorflow模型且可以使用模型接口发布应用服务在k8s环境中(eg.local,prem,cloud)

• 希望使用Jupyter notebooks来调试代码，多用户的notebook server

• 在训练的Job中，需要对的CPU或者GPU资源进行调度编排

• 希望Tensorflow和其他组件进行组合来发布服务

依赖库

• ksonnet 0.11.0以上版本 /可以直接从github上下载，scp ks文件到usr/local/bin

• kubernetes 1.8以上（直接使用CCE服务节点，需要创建一个CCE集群和若干节点，并为某个节点绑定EIP）

• kubectl tools

 1、安装ksonnet

 ksonnet 安装过程，可以去网址里面查看ks最新版本

wget https://github.com/ksonnet/ksonnet/releases/download/v0.13.0/ks_0.13.0_linux_amd64.tar.gz
tar -vxf ks_0.13.0_linux_amd64.tar.gz
cd -vxf ks_0.13.0_linux_amd64
sudo cp ks /usr/local/bin

安装完成后

2、安装kubectl工具

wget https://cce-storage.obs.cn-north-1.myhwclouds.com/kubectl.zip
yum install unzip
unzip kubectl.zip
cp kubectl /usr/local/bin/
#在集群页面查看kubectl工具
#下载并复制下图中的config文件内容
mkdir /root/.kube/
touch /root/.kube/config
vi /root/.kube/config
#黏贴内容 ：wq！保存
#因为这边节点已经绑定了EIP，直接选择集群内访问即可
kubectl config use-context internal

安装成功后执行kubectl version查看版本信息是否符合要求

3、安装kubef