使用DNS缓存修复Docker中的DNS超时[教程]

在CI中进行不稳定的测试是一场噩梦。 您无法确定您的新代码是否损坏了某些东西，或者仅仅是那些测试再次变得不稳定。 因此，每当我们看到开源项目Adapt的CI出现奇怪的随机故障时，我们都将尽速查找罪魁祸首。 这是关于我们如何发现我们（意外地）用流量泛滥DNS服务器以及如何在Docker中使用DNS缓存来解决问题的故事。

背景

AdaptJS是我从事的一个开源项目之一，可以将应用程序部署到多种云和技术中，因此使用Docker，Kubernetes，AWS，Google Cloud和其他类似技术进行了大量的系统测试和端到端测试。

我们在测试中大量使用了Docker，因此最终创建了许多短期容器，这些容器会启动，完成一些工作，例如构建或安装应用程序，然后被删除。 随着我们添加越来越多的这些测试，我们开始看到以前稳定的系统测试在CI中随机失败。

症状：测试超时

我们看到的第一个症状是测试超时。 我们的许多端到端测试的超时时间都很短，因此我们可以检测到新代码是否突然使最终用户花费了更长的时间。 但是现在，通常需要半秒的测试有时会花费5.5秒。

额外的5秒是一个很好的线索-听起来像-5秒可能是某种超时。 怀着这种直觉，我们回顾了所有看似随机的测试失败并找到了共同的线索：它们都是引发网络请求的测试。 我们还注意到有些测试花费了更长的时间才能失败...总是以5秒为增量。

这里没有太多的网络协议可以使用，因此快速搜索可以为我们指明正确的方向。 在Linux上，DNS服务器查询的默认超时仅为5秒 。

为了了解DNS发生了什么，我们找到了可能是在Linux上调试网络问题的最重要的工具： tcpdump 。 （或者，如果您更喜欢GUI版本， wireshark也很棒。）我们在主机系统（