容器网络问题排查常用命令

最新推荐文章于 2024-05-14 16:59:51 发布
最新推荐文章于 2024-05-14 16:59:51 发布
阅读量1.7k 收藏
点赞数
分类专栏： Kubernetes Docker 文章标签： docker k8s kubernetes
版权归博主所有，转载先联系博主，请带上本文链接！联系方式：abel533@gmail.com
本文链接：https://blog.csdn.net/isea533/article/details/100147829
版权

由于对网络的了解不够深入，本篇逻辑不清楚，只是放了几个关联的命令，至于更详细的原因，留待以后研究。

容器跨主机网络

一个正常的 3 节点容器网络网卡和路由信息如下。

节点一 192.168.200.204

网卡信息：

flannel.1: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1450
        inet 10.42.0.0  netmask 255.255.255.255  broadcast 0.0.0.0
        inet6 fe80::ec2c:5ff:fed1:2900  prefixlen 64  scopeid 0x20<link>
        ether ee:2c:05:d1:29:00  txqueuelen 0  (Ethernet)
        RX packets 8019  bytes 1873186 (1.7 MiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 8213  bytes 789044 (770.5 KiB)
        TX errors 0  dropped 8 overruns 0  carrier 0  collisions 0

路由信息：

Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         gateway         0.0.0.0         UG    100    0        0 ens33
10.42.0.10      0.0.0.0         255.255.255.255 UH    0      0        0 cali72476272766
10.42.0.11      0.0.0.0         255.255.255.255 UH    0      0        0 cali53fb75e9ddc
10.42.0.12      0.0.0.0         255.255.255.255 UH    0      0        0 cali9238d4857d8
10.42.0.13      0.0.0.0         255.255.255.255 UH    0      0        0 cali93e550b9ebf
10.42.1.0       10.42.1.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.2.0       10.42.2.0       255.255.255.0   UG    0      0        0 flannel.1
172.17.0.0      0.0.0.0         255.255.0.0     U     0      0        0 docker0
192.168.200.0   0.0.0.0         255.255.255.0   U     100    0        0 ens33

节点二 192.168.200.205

网卡信息：

flannel.1: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1450
        inet 10.42.2.0  netmask 255.255.255.255  broadcast 0.0.0.0
        inet6 fe80::9c71:24ff:fe0e:7787  prefixlen 64  scopeid 0x20<link>
        ether 9e:71:24:0e:77:87  txqueuelen 0  (Ethernet)
        RX packets 9483  bytes 839101 (819.4 KiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 11321  bytes 1165150 (1.1 MiB)
        TX errors 0  dropped 8 overruns 0  carrier 0  collisions 0

路由信息：

Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         gateway         0.0.0.0         UG    100    0        0 ens33
10.42.0.0       10.42.0.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.1.0       10.42.1.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.2.18      0.0.0.0         255.255.255.255 UH    0      0        0 calia386a0ae7e9
10.42.2.19      0.0.0.0         255.255.255.255 UH    0      0        0 calid8146ec96f0
10.42.2.20      0.0.0.0         255.255.255.255 UH    0      0        0 calid96aa26afb9
10.42.2.21      0.0.0.0         255.255.255.255 UH    0      0        0 cali125284d5716
10.42.2.22      0.0.0.0         255.255.255.255 UH    0      0        0 cali92f020e8f12
10.42.2.23      0.0.0.0         255.255.255.255 UH    0      0        0 cali6ffdb16a4e8
172.17.0.0      0.0.0.0         255.255.0.0     U     0      0        0 docker0
192.168.200.0   0.0.0.0         255.255.255.0   U     100    0        0 ens33

节点三 192.168.200.206

网卡信息：

flannel.1: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1450
        inet 10.42.1.0  netmask 255.255.255.255  broadcast 0.0.0.0
        inet6 fe80::80ce:7cff:fe3e:9136  prefixlen 64  scopeid 0x20<link>
        ether 82:ce:7c:3e:91:36  txqueuelen 0  (Ethernet)
        RX packets 12756  bytes 1068523 (1.0 MiB)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 10074  bytes 1792199 (1.7 MiB)
        TX errors 0  dropped 8 overruns 0  carrier 0  collisions 0

路由信息：

Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
default         gateway         0.0.0.0         UG    100    0        0 ens33
10.42.0.0       10.42.0.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.1.17      0.0.0.0         255.255.255.255 UH    0      0        0 cali013edd0c23e
10.42.1.18      0.0.0.0         255.255.255.255 UH    0      0        0 cali6cf9397d176
10.42.1.19      0.0.0.0         255.255.255.255 UH    0      0        0 calid4e960f5b99
10.42.1.20      0.0.0.0         255.255.255.255 UH    0      0        0 cali121e24acd4f
10.42.1.21      0.0.0.0         255.255.255.255 UH    0      0        0 cali8fb356abfba
10.42.1.22      0.0.0.0         255.255.255.255 UH    0      0        0 cali8097f1d812c
10.42.2.0       10.42.2.0       255.255.255.0   UG    0      0        0 flannel.1
172.17.0.0      0.0.0.0         255.255.0.0     U     0      0        0 docker0
192.168.200.0   0.0.0.0         255.255.255.0   U     100    0        0 ens33

简单分析

以 192.168.200.204 为例，当前 flannel.1 的 IP 为 10.42.0.0，和另外两个节点有如下的路由：

Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
10.42.1.0       10.42.1.0       255.255.255.0   UG    0      0        0 flannel.1
10.42.2.0       10.42.2.0       255.255.255.0   UG    0      0        0 flannel.1

查看 ARP 记录：

[root@localhost ~]# ip neigh show dev flannel.1
10.42.2.0 lladdr 9e:71:24:0e:77:87 PERMANENT
10.42.1.0 lladdr 82:ce:7c:3e:91:36 PERMANENT

查看对于 MAC 地址的网桥信息：

[root@localhost ~]# bridge fdb show flannel.1
82:ce:7c:3e:91:36 dev flannel.1 dst 192.168.200.206 self permanent
9e:71:24:0e:77:87 dev flannel.1 dst 192.168.200.205 self permanent

容器 Veth Pair 关系查看

当单个宿主机内容器网络不通的时候，可以通过本节的命令排查问题。

文中引用信息来自张磊的 深入剖析Kubernetes

张磊: Veth Pair 设备的特点是：它被创建出来后，总是以两张虚拟网卡（Veth Peer）的形式成对出现的。并且，从其中一个“网卡”发出的数据包，可以直接出现在与它对应的另一张“网卡”上，哪怕这两个“网卡”在不同的 Network Namespace 里。

运行下面命令启动一个容器：

docker run --name busybox --rm -it busybox /bin/sh

容器内查看网络信息：

/ # ifconfig
eth0      Link encap:Ethernet  HWaddr 02:42:AC:11:00:02  
          inet addr:172.17.0.2  Bcast:172.17.255.255  Mask:255.255.0.0
          UP BROADCAST RUNNING MULTICAST  MTU:1500  Metric:1
          RX packets:9 errors:0 dropped:0 overruns:0 frame:0
          TX packets:2 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:0 
          RX bytes:788 (788.0 B)  TX bytes:125 (125.0 B)

lo        Link encap:Local Loopback  
          inet addr:127.0.0.1  Mask:255.0.0.0
          UP LOOPBACK RUNNING  MTU:65536  Metric:1
          RX packets:0 errors:0 dropped:0 overruns:0 frame:0
          TX packets:0 errors:0 dropped:0 overruns:0 carrier:0
          collisions:0 txqueuelen:1000 
          RX bytes:0 (0.0 B)  TX bytes:0 (0.0 B)

打开另一个宿主机的 SSH 连接，通过下面脚本查看和当前容器匹配的 Veth Pair 设备：

[root@localhost ~]# curl -Ssl https://raw.githubusercontent.com/micahculpepper/dockerveth/master/dockerveth.sh | sh
CONTAINER ID	VETH       	NAMES
2c54348455eb	vethd030a3f	busybox

在宿主机查看该网卡信息：

vethd030a3f: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet6 fe80::8c6c:c9ff:fefb:56aa  prefixlen 64  scopeid 0x20<link>
        ether 8e:6c:c9:fb:56:aa  txqueuelen 0  (Ethernet)
        RX packets 3  bytes 167 (167.0 B)
        RX errors 0  dropped 0  overruns 0  frame 0
        TX packets 11  bytes 900 (900.0 B)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

通过 brctl 查看网桥信息：

[root@localhost ~]# brctl show
bridge name	bridge id		STP enabled	interfaces
docker0		8000.02422990970c	no		vethd030a3f

如果系统没有 brctl 可以安装 yum install bridge-utils。

可以看到该设备插在了 docker0 上。

张磊: 一旦一张虚拟网卡被“插”在网桥上，它就会变成该网桥的“从设备”。从设备会被“剥夺”调用网络协议栈处理数据包的资格，从而“降级”成为网桥上的一个端口。而这个端口唯一的作用，就是接收流入的数据包，然后把这些数据包的“生杀大权”（比如转发或者丢弃），全部交给对应的网桥。

isea533
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Docker系列之七：Docker 网络（内部网络、容器之间的连接）
wucong60的专栏
11-05 1万+
系列链接 Docker系列之一：Docker介绍及在Ubuntu上安装 Docker系列之二：Docker 入门 Docker系列之三：使用Docker镜像和仓库 Docker系列之四：Dockerfile的使用 Docker系列之五：Volume 卷的使用——以Redis为例 Docker系列之六：Volume 卷的使用——在Dockerfile中的用法 Docker系列之七：Do...
记一次docker网络排查
hu619016140的博客
07-30 1037
docker 网络排查
遇到Docker容器无法上网的问题时如何排查
最新发布
u011197085的博客
05-14 641
通过这些步骤，您应该能够诊断并解决Docker容器的网络连接问题。如果问题仍然存在，可以进一步检查或调整网络配置。
查找容器网卡与宿主机网卡的对应关系
屈帅波的技术博客
03-31 1536
#进入容器查看网卡name kubectl exec -it postgres-6b5c55f477-sjwh6 -n argo bash ip a ip link show | grep 33 brctl show 其实cni0 在这里充当了一个交换机的功能
docker 查看虚拟网卡_Docker容器网络-实现篇
weixin_40008566的博客
11-19 7377
Docker容器网络-实现篇通常，Linux容器的网络是被隔离在它自己的Network Namespace中，其中就包括：网卡（Network Interface）、回环设备（Loopback Device）、路由表（Routing Table）和iptables规则。对于一个进程来说，这些要素，就构成了它发起和响应网络请求的基本环境。前文说到容器网络对Linux虚拟化技术的依赖，这一篇章我们将一...
docker(二)容器的网络
hjc_042043的博客
09-02 620
Docker网络是宿主机虚拟出来的，并不是真实存在的网络设备，外部网络是无法寻址到的，这也意味着外部网络无法通过直接Container-IP访问到容器。在docker中我们很多时候需要将容器中的服务能够被外部访问到，但它因为是内网不能直接被访问，只能通过将端口映射到宿主机上的端口才能被访问。none模式关闭了容器的网络功能，这种场景使用的很少，容器并不需要网络（例如只需要写磁盘卷的批处理任务）如下图中，我们能看到其网络的网管信息，所关联的容器信息，以及代表的是docker0的网桥。
docker容器网络配置
阿干tkl的博客
05-04 1387
docker容器网络配置 Linux内核实现名称空间的创建 ip netns命令 可以借助ip netns命令来完成对 Network Namespace 的各种操作。ip netns命令来自于iproute安装包，一般系统会默认安装，如果没有的话，请自行安装。 注意：ip netns命令修改网络配置时需要 sudo 权限。 可以通过ip netns命令完成对Network Namespace 的相关操作，可以通过ip netns help查看命令帮助信息： #先把docker停掉 [root@localh
JAVA线上常见问题排查手段汇总
09-07
- **网络问题**：网络延迟或连接问题也可能影响性能，可以使用`netstat`、`tcpdump`等命令检查网络连接和流量。 - **负载均衡与集群监控**：在分布式系统中，需要监控所有节点的状态，确保负载均衡，使用`Nginx`...
金蝶容器Apusic中重新部署war包
03-27
本文将详细讲解如何在金蝶容器Apusic中重新部署WAR包，这一过程是开发和运维人员日常工作中常见的操作。 首先，了解WAR（Web Application Archive）包是一种标准的Java Web应用打包格式，它包含了Servlet、JSP、...
Docker容器如何查看ip地址的实现方法
09-29
理解Docker网络模型对于优化容器部署和故障排查至关重要。Docker还支持自定义网络，如用户定义的网络（User-Defined Networks），可以创建不同的网络拓扑，如overlay网络、host网络等，这些网络模型下查看IP地址的...
linux常用命令.docx
08-25
特别是在Java开发环境中，利用Linux命令可以有效地提高工作效率，帮助快速定位问题并进行故障排查。本文将详细介绍文档中提到的一些关键命令及其应用场景。 #### 二、核心命令详解 ##### 1. 查找容器中的代码文件 ...
AIX常用命令[参考].pdf
10-11
了解和熟练使用AIX的常用命令对于软件开发人员来说至关重要。以下是一些关键的AIX命令和概念： 1. **交换区管理**：交换区在AIX中用于扩展系统的虚拟内存。`lsps -a`用于查看所有交换区的信息，而`lsps -s`显示交换...
Docker网络模式解析
热门推荐
m0_62946761的博客
02-21 1万+
docker四种网络模式解析以及对应的小demo
docker容器网络
weixin_72901306的博客
08-10 2969
。。
带源（地址）ping
yilun的专栏
10-01 1万+
带源ping命令介绍
spring-cloud使用sleuth+zipkin实现链路追踪步骤
m0_37635053的博客
08-29 565
spring-cloud使用sleuth+zipkin实现链路追踪步骤 sleuth+zipkin实现链路追踪的作用： 它可以帮助收集服务的时间数据，以解决微服务架构中的延迟问题，包括数据的收集、存储、查找和展现 每个服务向zipkin报告计时数据，zipkin会根据调用关系通过Zipkin UI生成依赖关系图，展示多少跟踪请求经过了哪些服务，该系统让开发者可通过一个web前端轻松地收集和分析数据，可非常方便的监测系统中存在的瓶颈 使用步骤： ① 导包 这个放在公共微服务的pom中： <!--链路
Keepalived健康检查方式配置
yaoyaodexiaozhu的博客
07-29 6672
HTTP_GET|SSL_GET HTTP_GET | SSL_GET { url { path /# HTTP/SSL 检查的url 可以是多个 digest # HTTP/SSL 检查后的摘要信息 用工具genhash生成 status_code 200# HTTP/SSL 检查返回的状态码 } connect_port 80 # 连接端口 bindto connect
SVN迁移git 操作及填坑
gm371200587的博客
07-10 1416
迁移准备： ①SVN相关： 待迁移项目地址：https://192.168.**.**/svn/***/dev_code/trunk 账号:xxx/xxx ②git相关： git仓库地址：http://192.168.**.**/08other/***/***.git git账号密码：xxx/xxx 电脑安装git客户端（2.27版本不行，现在最新的是2.27） 我在链接里放了2.27版的git，2.21版的git ，还有git可视化操作包，和汉化包，不想用的去官网也可以，都是win 64的
记一次网络故障排查
docker做了端口映射却不能访问
06-17 246
事件： 整个公司的网络都连接不上了， 结构： 外网----路由器—交换机1—交换机2------网线（房间）----网线（个人） 1 外网–笔记本 （测试外网是否 联通） 2 外网–路由器—笔记本 （测试路由器） 3 外网–路由器—交换机1–笔记本 （测试交换机1） 4 外网–路由器–交换机2—笔记本 （测试交换机2） 5 外网–路由器–交换机1–交换机2...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

isea533

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值