本文来自Rancher Labs
介 绍
在Kubernetes 1.14版本中已经GA了对Windows的支持。这一结果凝结了一群优秀的工程师的努力,他们来自微软、Pivotal、VMware、红帽以及现在已经关闭的Apprenda等几家公司。我在Apprenda工作时,不定时会为sig-windows社区做出一些贡献。即便现在在Rancher Labs任职,也一直关注它的动向。所以当公司决定在Rancher中增加对Windows支持时,我极为兴奋。
Rancher 2.3已于本月月初发布,这是首个GA支持Windows容器的Kubernetes管理平台。它极大降低了企业使用Windows容器的复杂性,并为基于Windows遗留应用程序的现代化提供快捷的途径——无论这些程序是在本地运行还是在多云环境中运行。此外,Rancher 2.3还可以将它们容器化并将其转换为高效、安全和可迁移的多云应用程序,从而省去重写应用程序的工作。
在本文中,我们将在运行RKE的Kubernetes集群之上配置Rancher集群。我们也将会配置同时支持Linux和Windows容器的集群。完成配置后,我们将聊聊操作系统的定位,因为Kubernetes scheduler需要指导各种Linux和Windows容器在启动时的部署位置。
我们的目标是以完全自动化的方式执行这一操作。由于Rancher 2.3目前尚未stable,因此这无法在生产环境中使用,但如果你正需要使用Azure和Rancher来完成基础架构自动化,那么这对你们的团队而言将会是一个良好的开端。退一万步而言,即使你不使用Azure,在本例中的许多概念和代码都可以应用于其他环境中。
考虑因素
Windows vs. Linux
在我们正式开始之前,我需要告知你许多注意事项和“陷阱”。首先,最显而易见的就是:Windows不是Linux。Windows新增了支持网络网格中的容器化应用程序所需的子系统,它们是Windows操作系统专有的,由Windows主机网络服务和Windows主机计算服务实现。操作系统以及底层容器运行时的配置、故障排除以及运维维护将会有显著区别。而且,Windows节点收到Windows Server licensing的约束,容器镜像也受Windows容器的补充许可条款的约束。
Windows OS版本
WindowsOS版本需要绑定到特定的容器镜像版本,这是Windows独有的。使用Hyper-V隔离可以克服这一问题,但是从Kubernetes 1.16开始,Kubernetes不支持Hyper-V隔离。因此,Kubernetes和Rancher仅能在Windows Server 1809/Windows Server 2019以及Windows Server containers Builds 17763 以及Docker EE-basic 18.09之前的版本中运行。
持久性支持和CSI插件
Kubernetes 1.16版本以来,CSI插件支持alpha版本。Windows节点支持大量的in-tree和flex volume。
CNI插件
Rancher 支持仅限于flannel提供的主机网关(L2Bridge)和VXLAN(Overlay)网络支持。在我们的方案中,我们将利用默认的VXLAN,因为当节点并不都在同一个网络上时,主机网关选项需要User Defined Routes配置。这取决于提供商,所以我们将利用VXLAN功能的简单性。根据Kubernetes文档,这是alpha级别的支持。当前没有支持Kubernetes网络策略API的开源Windows网络插件。
其他限制
请确保你已经阅读了Kubernetes文档,因为在Windows容器中有许多功能无法实现,或者其功能和Linux中的相同功能实现方式有所不同。
Kubernetes文档:
https://kubernetes.io/docs/setup/production-environment/windows/intro-windows-in-kubernetes/#limitations
基础架构即代码
自动化是实现DevOps的第一种方式。我们将自动化我们的Rancher集群和要在该集群中配置的Azure节点的基础架构。
Terraform
Terraform是一个开源的基础架构自动化编排工具,它几乎支持所有市面上能见到的云服务提供商。今天我们将使用这一工具来自动化配置。确保你运行的Terraform版本至少是Terraform 12。在本文中,使用Terraform 版本是v0.12.9。
$ terraform version
Terraform v0.12.9
RKE Provider
用于Terraform 的RKE provider是一个社区项目,并非由Rancher官方进行研发的,但包括我在内的Rancher的很多工程师都在使用。因为这是一个社区provider而不是Terraform官方的provider,因此你需要安装最新版本到你的Terraform插件目录中。对于大部分的Linux发行版来说,你可以使用本文资源库中包含的setup-rke-terraform-provider.sh
脚本。
Rancher Provider
用于Terraform的Rancher2 provider是Terraform支持的provider,它通过Rancher REST API来自动化Rancher。我们将用它从Terraform的虚拟机中创建Kubernetes集群,这一虚拟机需要使用Azure Resource Manager和Azure Active Directory Terraform Provider进行创建。
本例的Format
本文中的Terraform模型的每个步骤都会被拆分成子模型,这将增强模型可靠性并且将来如果你创建了其他自动化架构&