Prometheus+grafana监控容器tcp特定端口连接数

首先，需要确认你的系统中有一个能够提供TCP连接数数据的数据源，Kubernetes环境中的node_exporter收集TCP连接数指标

方式一：编写脚本监控

编写一个脚本，定期检查特定端口的TCP连接数，并使用Prometheus的pushgateway将结果推送到Prometheus。这种方法需要你在系统中部署pushgateway，并配置脚本以适当的频率运行。

使用Prometheus的Pushgateway将结果推送到Prometheus主要涉及到几个关键步骤：安装Pushgateway、配置Prometheus以从Pushgateway拉取数据、以及使用适当的方法（如curl命令或开源SDK）将监控数据推送到Pushgateway

1、安装Pushgateway

首先，你需要在你的环境中安装Pushgateway。Pushgateway是一个独立的HTTP服务器，它允许你以push的方式将监控数据发送到Prometheus。你可以从Prometheus GitHub仓库下载最新版本的Pushgateway，并按照官方文档进行安装和配置。

2、配置Prometheus以从Pushgateway拉取数据

在Prometheus的配置文件（通常是prometheus.yml）中，你需要添加一个作业（job）来指定Prometheus如何从Pushgateway拉取数据。配置可能如下所示：

scrape_configs:  
  - job_name: 'pushgateway'  
    scrape_interval: 15s  
    static_configs:  
      - targets: ['<pushgateway-address>:9091']  # 替换<pushgateway-address>为Pushgateway的实际地址  
        labels:  
          instance: pushgateway  
    honor_labels: true  # 保留Pushgateway推送的原始标签

这里，job_name是Prometheus中用于标识作业的名称，scrape_interval是Prometheus拉取数据的间隔时间，targets是Pushgateway的地址列表，honor_labels参数设置为true表示Prometheus在抓取数据时会保留原始的指标标签，而不是使用作业本身的标签。

3、推送数据到Pushgateway

安装并配置好Pushgateway和Prometheus之后，你就可以开始推送数据了。Pushgateway支持多种推送数据的方式，包括使用curl命令或开源SDK。

使用curl命令推送数据

你可以使用curl命令直接向Pushgateway发送HTTP POST请求来推送数据。请求的格式通常是Prometheus的文本格式或Protocol Buffers格式。例如：

bash复制代码

echo "my_metric 123" | curl --data-binary @- http://<pushgateway-address>:9091/metrics/job/myjob

这条命令会向Pushgateway推送一个名为my_metric的指标，其值为123，并将该指标归类到名为myjob的作业下。

使用开源SDK推送数据

除了curl命令外，你还可以使用各种编程语言的开源SDK来推送数据。这些SDK通常提供了更高级别的接口来创建和推送指标。例如，在Python中，你可以使用prometheus_client库来推送数据：

from prometheus_client import Gauge, push_to_gateway  
  
g = Gauge('my_metric', 'Description of my metric')  
g.set(123)  
push_to_gateway('<pushgateway-address>:9091', job='myjob', grouping_key={'instance': 'myinstance'}, registry=None)

这里，push_to_gateway函数用于将指标推送到Pushgateway，你需要指定Pushgateway的地址、作业名称、分组键（可选）以及注册表（如果使用了自定义注册表）。

4、注意事项

• 确保Pushgateway和Prometheus之间的网络是通畅的，以便Prometheus能够成功拉取数据。
• Pushgateway只是一个临时存储监控数据的工具，你应该确保Prometheus能够定期拉取数据，并将其持久化存储到时间序列数据库中。
• 考虑到安全性和可维护性，你应该避免在生产环境中直接向Pushgateway推送敏感数据或大量数据。
• 如果你的监控数据是通过自动化脚本或程序生成的，请确保这些脚本或程序能够稳定运行，并及时处理可能出现的错误或异常情况。

方式二：sidecar容器方式

在每个需要监控的Pod中添加一个sidecar容器，该容器负责收集TCP连接数信息并将其暴露为Prometheus可以抓取的指标。

在Grafana中添加面板

一旦Prometheus开始收集TCP 10000端口的连接数数据，你就可以在Grafana中添加一个新的面板来展示这个数据。具体步骤如下：

• 打开Grafana，并选择或创建一个Dashboard。
• 点击“Add panel”按钮，选择你想要的图表类型（如折线图、仪表板等）。
• 在“Metrics”或“Data source”部分，选择你的Prometheus数据源。
• 使用PromQL查询语句来指定你想要展示的TCP 10000连接数数据。
• 配置图表的其他选项，如标题、单位、时间范围等。
• 点击“Save”按钮保存你的面板。