实战：NodeLocal DNSCache安装-2023.2.23(测试成功)

最新推荐文章于 2024-02-22 10:15:28 发布
最新推荐文章于 2024-02-22 10:15:28 发布
阅读量1k 收藏 3
点赞数 1
分类专栏： k8s 文章标签： kubernetes docker 容器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39246554/article/details/129193244
版权

实战：NodeLocal DNSCache安装-2023.2.24(测试成功)

目录

文章目录

本节实战

实战名称
💘 实战：NodeLocal DNSCache安装-2023.2.24(测试成功)

实验环境

实验环境：
1、win10,vmwrokstation虚机；
2、k8s集群：3台centos7.6 1810虚机，1个master节点,2个node节点
   k8s version: v1.25.4
   containerd: v1.6.10

实验软件

链接：https://pan.baidu.com/s/10hDsl31Sa93RU4SaUMRBPw?pwd=oflm
提取码：oflm

2023.2.23-实战：NodeLocal DNSCache安装(测试成功)

image-20230224070955124

0、部署前dns测试

[root@master1 ~]#kubectl run -it --image busybox:1.28.3 test-dns --restart=Never --rm /bin/sh
If you don't see a command prompt, try pressing enter.
/ # cat /etc/resolv.conf
search default.svc.cluster.local svc.cluster.local cluster.local
nameserver 10.96.0.10
options ndots:5
/ #
/ #
/ # nslookup kubernetes
Server:    10.96.0.10
Address 1: 10.96.0.10 kube-dns.kube-system.svc.cluster.local

Name:      kubernetes
Address 1: 10.96.0.1 kubernetes.default.svc.cluster.local
/ #
/ #
/ # nslookup youdianzhishi.com
Server:    10.96.0.10
Address 1: 10.96.0.10 kube-dns.kube-system.svc.cluster.local

Name:      youdianzhishi.com
Address 1: 39.106.22.102
/ #

1、获取资源清单

  • 要安装 NodeLocal DNSCache 也非常简单，直接获取官方的资源清单即可：
[root@master1 ~]#wget https://github.com/kubernetes/kubernetes/raw/master/cluster/addons/dns/nodelocaldns/nodelocaldns.yaml
--2021-12-28 16:38:36--  https://github.com/kubernetes/kubernetes/raw/master/cluster/addons/dns/nodelocaldns/nodelocaldns.yaml
Resolving github.com (github.com)... 20.205.243.166
Connecting to github.com (github.com)|20.205.243.166|:443... connected.
HTTP request sent, awaiting response... 302 Found
Location: https://raw.githubusercontent.com/kubernetes/kubernetes/master/cluster/addons/dns/nodelocaldns/nodelocaldns.yaml [following]
--2021-12-28 16:38:36--  https://raw.githubusercontent.com/kubernetes/kubernetes/master/cluster/addons/dns/nodelocaldns/nodelocaldns.yaml
Resolving raw.githubusercontent.com (raw.githubusercontent.com)... 185.199.108.133, 185.199.111.133, 185.199.109.133, ...
Connecting to raw.githubusercontent.com (raw.githubusercontent.com)|185.199.108.133|:443... connected.
HTTP request sent, awaiting response... 200 OK
Length: 5334 (5.2K) [text/plain]
Saving to: ‘nodelocaldns.yaml’

100%[===================================================================>] 5,334       --.-K/s   in 0.1s

2021-12-28 16:38:37 (51.4 KB/s) - ‘nodelocaldns.yaml’ saved [5334/5334]

[root@master1 ~]#ll nodelocaldns.yaml
-rw-r--r-- 1 root root 5334 Dec 28 16:38 nodelocaldns.yaml
[root@master1 ~]#

……
#该资源清单文件中我们重点看下 NodeLocalDNS 的配置对象：
---
apiVersion: v1
kind: ConfigMap
metadata:
  name: node-local-dns
  namespace: kube-system
  labels:
    addonmanager.kubernetes.io/mode: Reconcile
data:
  Corefile: |
    __PILLAR__DNS__DOMAIN__:53 {
        errors
        cache {
                success 9984 30
                denial 9984 5
        }
        reload
        loop
        bind __PILLAR__LOCAL__DNS__ __PILLAR__DNS__SERVER__
        forward . __PILLAR__CLUSTER__DNS__ {
                force_tcp
        }
        prometheus :9253
        health __PILLAR__LOCAL__DNS__:8080
        }
    in-addr.arpa:53 {
        errors
        cache 30
        reload
        loop
        bind __PILLAR__LOCAL__DNS__ __PILLAR__DNS__SERVER__
        forward . __PILLAR__CLUSTER__DNS__ {
                force_tcp
        }
        prometheus :9253
        }
    ip6.arpa:53 {
        errors
        cache 30
        reload
        loop
        bind __PILLAR__LOCAL__DNS__ __PILLAR__DNS__SERVER__
        forward . __PILLAR__CLUSTER__DNS__ {
                force_tcp
        }
        prometheus :9253
        }
    .:53 {
        errors
        cache 30
        reload
        loop
        bind __PILLAR__LOCAL__DNS__ __PILLAR__DNS__SERVER__
        forward . __PILLAR__UPSTREAM__SERVERS__
        prometheus :9253
        }
……

该资源清单文件中包含几个变量值得注意，其中：

  • __PILLAR__DNS__SERVER__ ：表示 kube-dns 这个 Service 的 ClusterIP，可以通过命令 kubectl get svc -n kube-system | grep kube-dns | awk'{ print $3 }' 获取（我们这里就是 10.96.0.10）
  • __PILLAR__LOCAL__DNS__：表示 DNSCache 本地监听的 IP 地址，该地址可以是任何地址，只要该地址不和你的集群里现有的 IP 地址发生冲突。 推荐使用本地范围内的地址，例如 IPv4 链路本地区段 169.254.0.0/16 内的地址（默认一般取 169.254.20.10 即可），或者 IPv6 唯一本地地址区段 fd00::/8内的地址
  • __PILLAR__DNS__DOMAIN__：表示集群域，默认就是 cluster.local

另外还有两个参数 __PILLAR__CLUSTER__DNS__ 和 __PILLAR__UPSTREAM__SERVERS__，这两个参数会进行自动配置，对应的值来源于 kube-dns 的 ConfigMap 和定制的 Upstream Server 配置。

2、部署

  • ⚠️ 这里需要注意的是镜像版本，本次使用k8s-dns-node-cache:1.22.13版本（因为这个版本的镜像是已经被转存过了的，当然你也可以转存当前的镜像）

但是，当前下载下来里面镜像版本是：k8s-dns-node-cache:1.22.18

[root@master1 ~]#cat nodelocaldns.yaml |grep image
        image: registry.k8s.io/dns/k8s-dns-node-cache:1.22.18

修改次容器镜像为：cnych/k8s-dns-node-cache:1.22.13

#vim nodelocaldns.yaml
……
将
image: registry.k8s.io/dns/k8s-dns-node-cache:1.22.18
改为：
image: cnych/k8s-dns-node-cache:1.22.13
……

image-20230223212948106

  • 直接执行如下所示的命令即可安装：
sed 's/__PILLAR__DNS__SERVER__/10.96.0.10/g
s/__PILLAR__LOCAL__DNS__/169.254.20.10/g
s/__PILLAR__DNS__DOMAIN__/cluster.local/g' nodelocaldns.yaml |
kubectl apply -f -

#注意：这个使用的是老师的镜像中转地址cnych。

源课件命令如下：(这里上面已经收到改过了)

sed 's/registry.k8s.io\/dns/cnych/g
s/__PILLAR__DNS__SERVER__/10.96.0.10/g
s/__PILLAR__LOCAL__DNS__/169.254.20.10/g
s/__PILLAR__DNS__DOMAIN__/cluster.local/g' nodelocaldns.yaml |
kubectl apply -f -
  • 可以通过如下命令来查看对应的 Pod 是否已经启动成功：
[root@k8s-master1 ~]#kubectl get po -nkube-system -l k8s-app=node-local-dns -owide
NAME                   READY   STATUS    RESTARTS   AGE   IP            NODE          NOMINATED NODE   READINESS GATES
node-local-dns-bsl2n   1/1     Running   0          35h   172.29.9.32   k8s-node1     <none>           <none>
node-local-dns-gnjnw   1/1     Running   0          35h   172.29.9.31   k8s-master1   <none>           <none>
node-local-dns-z4cpj   1/1     Running   0          35h   172.29.9.33   k8s-node2     <none>           <none>
  • 我们导出来一个pod看下情况：
[root@master1 ~]#kubectl get po node-local-dns-6mhj8 -nkube-system -oyaml

这里可以看到显示从169.254.20.10解析地址，如果没有再去找10.96.0.10的。

image-20230219211720551

image-20230219211822345

image-20230219211906988

需要注意的是这里使用 DaemonSet 部署 node-local-dns 使用了 hostNetwork=true，会占用宿主机的 8080 端口，所以需要保证该端口未被占用。

3、修改 kubelet 的 --cluster-dns 参数

  • 先来确认下当前kube-proxy组件使用的模式是什么？
[root@master1 NodeLocalDnsCache]#kubectl get cm kube-proxy -nkube-system -oyaml|grep mode
    mode: ipvs

但是到这里还没有完，如果 kube-proxy 组件使用的是 ipvs 模式的话，我们还需要修改 kubelet 的 --cluster-dns 参数，将其指向 169.254.20.10，Daemonset 会在每个节点创建一个网卡来绑这个 IP，Pod 向本节点这个 IP 发 DNS 请求，缓存没有命中的时候才会再代理到上游集群 DNS 进行查询。

10: nodelocaldns: <BROADCAST,NOARP> mtu 1500 qdisc noop state DOWN group default
    link/ether 6a:e9:a3:9b:03:a8 brd ff:ff:ff:ff:ff:ff
    inet 169.254.20.10/32 scope global nodelocaldns
       valid_lft forever preferred_lft forever
    inet 10.96.0.10/32 scope global nodelocaldns
       valid_lft forever preferred_lft forever
[root@master1 ~]#

⚠️ 注意：**iptables 模式下 Pod 还是向原来的集群 DNS 请求，节点上有这个 IP 监听，会被本机拦截，再请求集群上游 DNS，所以不需要更改 **--cluster-dns参数。

  • 由于我这里使用的是 kubeadm 安装的 1.25.4 版本的集群，所以我们只需要替换节点上 /var/lib/kubelet/config.yaml 文件中的 clusterDNS 这个参数值，然后重启即可：
sed -i 's/10.96.0.10/169.254.20.10/g' /var/lib/kubelet/config.yaml
systemctl daemon-reload && systemctl restart kubelet

⚠️ 注意：all节点均要配置。

4、验证

  • 待 node-local-dns 安装配置完成后，我们可以部署一个新的 Pod 来验证下：
# test-node-local-dns.yaml
apiVersion: v1
kind: Pod
metadata:
  name: test-node-local-dns
spec:
  containers:
  - name: local-dns
    image: busybox:1.28.3
    command: ["/bin/sh", "-c", "sleep 60m"]
  • 直接部署：
[root@master1 ~]#kubectl apply -f test-node-local-dns.yaml
pod/test-node-local-dns created
[root@master1 ~]#kubectl exec -it test-node-local-dns -- sh
/ # cat /etc/resolv.conf
search default.svc.cluster.local svc.cluster.local cluster.local
nameserver 169.254.20.10
options ndots:5
/ #

我们可以看到 nameserver 已经变成 169.254.20.10 了，当然对于之前的历史 Pod 要想使用 node-local-dns 则需要重建。

⚠️ 注意

如果担心线上环境修改 --cluster-dns 参数会产生影响，我们也可以直接在新部署的 Pod 中通过 dnsConfig 配置使用新的 localdns 的地址来进行解析。

  • 创建yaml文件
#test-node-local-dns-2.yaml
apiVersion: v1
kind: Pod
metadata:
  name: test-node-local-dns-2
spec:
  dnsPolicy: None #None的时候需要配置下面的dnsConfig
  dnsConfig:
    nameservers: # 如果dnsPolicy不等于None，则会将nameservers合并到原有的（dnsPolicy默认是ClusterFirst）
      - 169.254.20.10
    searches:
      - default.svc.cluster.local
      - svc.cluster.local
      - cluster.local
    options:
      - name: ndots
        value: "5"
  containers:
    - name: test
      image: cnych/jessie-dnsutils:1.3
      command:
        - sleep
        - "infinity"
      imagePullPolicy: IfNotPresent
  • 部署
[root@master1 ~]#kubectl apply -f test-node-local-dns-2.yaml
root@master1 ~]#kubectl exec -it test-node-local-dns-2 -- bash
#  cat /etc/resolv.conf
search default.svc.cluster.local svc.cluster.local cluster.local
nameserver 169.254.20.10
options ndots:5
#
  • 我们可以看到 nameserver 已经变成 169.254.20.10 了，同样简单测试下是否可以正常工作：
[root@k8s-master1 ~]#kubectl exec -it test-node-local-dns-2 -- bash
root@test-node-local-dns-2:/# cat /etc/resolv.conf
nameserver 169.254.20.10
search default.svc.cluster.local svc.cluster.local cluster.local
options ndots:5



root@test-node-local-dns-2:/# nslookup youdianzhishi.com
Server:		169.254.20.10
Address:	169.254.20.10#53

Non-authoritative answer:
Name:	youdianzhishi.com
Address: 39.106.22.102

root@test-node-local-dns-2:/# nslookup kubernetes.default
Server:		169.254.20.10
Address:	169.254.20.10#53

Name:	kubernetes.default.svc.cluster.local
Address: 10.96.0.1

root@test-node-local-dns-2:/#

测试结束。😘

关于我

我的博客主旨：

  • 排版美观，语言精炼；
  • 文档即手册，步骤明细，拒绝埋坑，提供源码；
  • 本人实战文档都是亲测成功的，各位小伙伴在实际操作过程中如有什么疑问，可随时联系本人帮您解决问题，让我们一起进步！

🍀 微信二维码
x2675263825 （舍得）， qq：2675263825。

image-20230107215114763

🍀 微信公众号
《云原生架构师实战》

image-20230107215126971

🍀 语雀

https://www.yuque.com/xyy-onlyone

image-20230224072219603

🍀 csdn
https://blog.csdn.net/weixin_39246554?spm=1010.2135.3001.5421

image-20230107215149885

🍀 知乎
https://www.zhihu.com/people/foryouone

image-20230107215203185

最后

好了，关于本次就到这里了，感谢大家阅读，最后祝大家生活快乐，每天都过的有意义哦，我们下期见！

com/xyy-onlyone

[外链图片转存中…(img-FjfrIrB9-1677194707216)]

🍀 csdn
https://blog.csdn.net/weixin_39246554?spm=1010.2135.3001.5421

[外链图片转存中…(img-jiVhMGUp-1677194707217)]

🍀 知乎
https://www.zhihu.com/people/foryouone

[外链图片转存中…(img-b2xbJYLM-1677194707217)]

最后

好了，关于本次就到这里了，感谢大家阅读，最后祝大家生活快乐，每天都过的有意义哦，我们下期见！

image-20230223211326098

一念一生～one
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
coredns-nodecache:NodeLocal DNS实施为CoreDNS插件
05-08
Coredns节点缓存 Kubernetes附加组件建议在Kubernetes集群的所有节点上运行DNS缓存服务器。 建议的缓存服务器是 ，它是CoreDNS的瘦包装器，用于处理虚拟网络接口和关联的IPTables规则的设置和拆除。 Coredns-nodecache尝试将节点缓存实现为CoreDNS插件，而不是包装器。 这样做的动机是： 该实现仅依赖CoreDNS插件API，该API在各个版本之间应向后兼容。 这应该使使用最新版本的CoreDNS更容易（请参阅 ） nodecache的配置将在CoreDNS配置文件中完成，而不是在Corefile和命令行参数之间进行拆分。 此外，coredns-nodecache可以为本地节点提供高可用性设置。 插件配置 镜像可在DockerHub上找到： ://hub.docker.com/r/contentful/coredns-node
k8s集群配置NodeLocal DNSCache
qq_44397993的博客
01-11 1483
在当今的体系结构中，运行在 ‘ClusterFirst’ DNS 模式下的 Pod 可以连接到 kube-dns serviceIP 进行 DNS 查询。node-local-dns 接口不能绑定 kube-dns 的集群 IP 地址，因为 IPVS 负载均衡使用的接口已经占用了该地址。：集群内的服务基本都是通过域名进行访问，coredns在解析压力大时会存在慢或者丢包的情况，导致服务之间解析异常。1、 使用当前的 DNS 体系结构，如果没有本地 kube-dns/CoreDNS 实例，则具有最高。
k8s之nodelocaldns与CoreDNS组件
johnhuster的专栏
02-22 685
k8s之nodelocaldns与CoreDNS组件
kubernetes 【网络组件】【3】Coredns+Nodelocaldns cache解决Coredns域名解析延迟
爱死亡机器人
07-19 2960
文章目录1. 背景2. 服务是如何工作的？3. Linux内核中的DNAT4. 问题5. 意见建议6. 内核修复7. 方案（一）：使用 TCP 协议发送 DNS 请求8. 方案（二）：避免相同五元组 DNS 请求的并发9. 方案（三） Kubernetes 集群中使用 NodeLocal DNSCache9.1 优势9.2 架构图9.3 环境检查9.4 部署9.5 两种种方案测试nodelocaldns实效性9.6 测试coredns+nodelocaldns的效果 1. 背景 【摘要】 目前18.6版
10. 部署dns插件
bingzhilingyi的博客
09-07 496
官方文件目录：https://github.com/kubernetes/kubernetes/tree/master/cluster/addons/dns 下载kube-dns.yaml.base $ wget https://github.com/kubernetes/kubernetes/blob/master/cluster/addons/dns/kube-dns.yaml.b...
k8s 服务注册与发现（四）DNS解析异常问题排查
看，未来的博客
09-24 4123
本文介绍关于DNS解析异常的诊断流程、排查思路、常见解决方案和排查方法。
NodeLocal DNS介绍及部署应用
不忘初心，方得始终
06-09 2169
NodeLocal DNSCache通过在集群节点上运行一个 DaemonSet 来提高 clusterDNS 性能和可靠性。处于ClusterFirst的 DNS 模式下的 Pod 可以连接到kube-dns的 serviceIP 进行 DNS 查询。通过kube-proxy组件添加的iptables规则将其转换为CoreDNS端点。通过在每个集群节点上运行 DNS 缓存，NodeLocal DNSCache 可以缩短 DNS 查找的延迟时间、使 DNS 查找时间更加一致，以及减少
k8s教程（service篇）-Node本地DNS缓存
阿甘兄
01-13 2277
讲解Node本地DNS缓存相关的概念
wget Unable to establish SSL connection.错误
任我行的博客
07-28 950
代码】wgetUnabletoestablishSSLconnection.错误。
Coredns+Nodelocaldns cache解决Coredns域名解析延迟
qq_38461443的博客
08-01 4287
目前18.6版本和之前的coredns都会出现超时5s的情况，那么为什么会出现coredns超时的情况发生？ 背景 在Kubernetes中，Pod访问DNS服务器（kube-dns）的最常见方法是通过服务抽象。 因此，在尝试解释问题之前，了解服务的工作原理以及因此在Linux内核中如何实现目标网络地址转换（DNAT）至关重要。 服务是如何工作的？ 在iptables模式下（默认情况下），每个服务的kube-proxy在主机网络名称空间的nat表中创建一些iptables规则。 让我们考虑在集群中具
Error response from daemon: Get https://registry-1.docker.io/v2/: dial tcp: lookup registry-1.docker
01-20
文章目录异常说明具体做法: 异常说明 ...一通百度，发现原来是dns服务器的错误，把服务器改成8.8.8.8或者114.114.114.114即可 具体做法: vim /etc/sysconfig/network-scripts/ifcfg-ens33 vim /et
netty-resolver-dns-4.1.65.Final-API文档-中文版.zip
07-13
赠送jar包：netty-resolver-dns-4.1.65.Final.jar； 赠送原API文档：netty-resolver-dns-4.1.65.Final-javadoc.jar； 赠送源代码：netty-resolver-dns-4.1.65.Final-sources.jar； 赠送Maven依赖信息文件：netty-...
netty-codec-dns-4.1.65.Final-API文档-中英对照版.zip
07-13
赠送jar包：netty-codec-dns-4.1.65.Final.jar； 赠送原API文档：netty-codec-dns-4.1.65.Final-javadoc.jar； 赠送源代码：netty-codec-dns-4.1.65.Final-sources.jar； 赠送Maven依赖信息文件：netty-codec-dns-...
netty-resolver-dns-4.1.68.Final-API文档-中文版.zip
06-04
赠送jar包：netty-resolver-dns-4.1.68.Final.jar； 赠送原API文档：netty-resolver-dns-4.1.68.Final-javadoc.jar； 赠送源代码：netty-resolver-dns-4.1.68.Final-sources.jar； 赠送Maven依赖信息文件：netty-...
netty-resolver-dns-4.1.73.Final-API文档-中文版.zip
05-07
赠送jar包：netty-resolver-dns-4.1.73.Final.jar； 赠送原API文档：netty-resolver-dns-4.1.73.Final-javadoc.jar； 赠送源代码：netty-resolver-dns-4.1.73.Final-sources.jar； 赠送Maven依赖信息文件：netty-...
阿里云k8s服务之间偶尔获取不到dns解析安装ACK NodeLocal DNSCache
jialiu111111的博客
09-12 562
在命名空间DNSConfig自动注入开启的情况下，如需对部分Pod进行豁免（即不进行注入），可以调整其Pod Template中Labels标签字段，加上node-local-dns-injection=disabled标签。3.如果有些服务有特殊的dns配置要求，就会覆盖掉，所以要设置一下，禁用掉dns缓存配置，打上禁用DNS注入node-local-dns-injection=disabled标签。如果您的Pod容器未注入DNS缓存服务器的IP地址，请检查Pod是否未满足以下条件。
Kubernetes集群部署之七-CoreDNS和Dashboard部署
完颜振江
01-22 552
创建CoreDNS: 之前已经下载了kubernetes的软件包，coreDNS的文件也包括在里面，可以直接用，也可以网上下载. [root@k8s-master ~]# cd /usr/local/src/kubernetes/cluster/addons/dns [root@k8s-master dns]# cp coredns.yaml.base coredns.yaml 将配置文件coredns.yaml中，修改如下两个地方为自己的domain和cluster ip地址. 1.kuberne
【DNS系列-K8S排错】K8S 中 DNS 排错尝试
叮当猫的喵i
08-26 1037
删除了 nodelocaldns 和 coredns 的 loop 插件。添加 iptables 规则，重启 coredns。
java.lang.IllegalArgumentException: java.net.UnknownHostException: 10.32.32.1-01.qd.link-x.host
最新发布
03-06
java.lang.IllegalArgumentException: java.net.UnknownHostException: 10.32.32.1-01.qd.link-x.host 是一个Java异常，表示在进行网络通信时发生了未知的主机异常。具体来说，这个异常是由于无法解析主机名 "10.32.32.1-01.qd.link-x.host" 导致的。 可能的原因包括： 1. 主机名错误：请确保输入的主机名正确，检查是否存在拼写错误或者其他格式问题。 2. DNS解析问题：如果主机名是有效的，但仍然无法解析，可能是由于DNS服务器配置问题或网络连接问题导致的。可以尝试使用其他网络或者手动配置DNS服务器来解决问题。 3. 网络连接问题：如果网络连接不稳定或者存在防火墙等限制，可能导致无法访问指定的主机。请检查网络连接是否正常，并确保没有任何阻止访问的限制。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值