ZipKin原理学习(分布式实时数据追踪系统)+window部署zipkin+k8s部署zipkin

最新推荐文章于 2025-04-16 09:53:09 发布
最新推荐文章于 2025-04-16 09:53:09 发布
阅读量896 收藏 8
点赞数 9
文章标签： 学习 分布式 kubernetes
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/2401_87555420/article/details/143490701
版权

在追踪日志中，有几个基本概念spanId、traceId、parentId

  • traceId：用来确定一个追踪链的16字符长度的字符串，在某个追踪链中保持不变。
  • spanId：区域Id，在一个追踪链中spanId可能存在多个，每个spanId用于表明在某个服务中的身份，也是16字符长度的字符串。
  • parentId：在跨服务调用者的spanId会传递给被调用者，被调用者会将调用者的spanId作为自己的parentId，然后自己再生成spanId。

如下图：

刚发起调用时traceId和spanId是一致，parentId不存在。

这里写图片描述

被调用者的traceId和调用者的traceId是一致的，被调用者会产生自己的spanId，并且被调用者的parentId是调用者的spanId

这里写图片描述

window安装zipkin

1、下载：

下载地址：https://search.maven.org/remote_content?g=io.zipkin.java&a=zipkin-server&v=LATEST&c=exec

2、运行：java -jar zipkin-server-2.8.3-exec.jar

这里写图片描述

3、访问：zipkin Server 运行后默认的访问地址：http://localhost:9411

这里写图片描述

4、调用链分析

启动4个服务，调用关系如下：brave-webmvc-example服务调用brave-webmvc-example2，brave-webmvc-example2分别调用brave-webmvc-example3和brave-webmvc-example4（代码地址），链路关系如下图：

这里写图片描述

右上角JSON节目可以看到4个服务的调用数据如下图：

[
  {
    "traceId": "a4aa11d855699355",
    "id": "a4aa11d855699355",
    "name": "get /start",
    "timestamp": 1526110753393795,
    "duration": 3873359,
    "annotations": [
      {
        "timestamp": 1526110753393795,
        "value": "sr",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757267154,
        "value": "ss",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      }
    ],
    "binaryAnnotations": [
      {
        "key": "ca",
        "value": true,
        "endpoint": {
          "serviceName": "",
          "ipv6": "::1",
          "port": 64570
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/start",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.class",
        "value": "HomeController",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.method",
        "value": "start",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      }
    ]
  },
  {
    "traceId": "a4aa11d855699355",
    "id": "cf49951d471ac7c5",
    "name": "get /foo",
    "parentId": "a4aa11d855699355",
    "timestamp": 1526110753583404,
    "duration": 3650640,
    "annotations": [
      {
        "timestamp": 1526110753583404,
        "value": "cs",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110754327066,
        "value": "sr",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757234044,
        "value": "cr",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757235819,
        "value": "ss",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      }
    ],
    "binaryAnnotations": [
      {
        "key": "ca",
        "value": true,
        "endpoint": {
          "serviceName": "",
          "ipv4": "127.0.0.1",
          "port": 64578
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/foo",
        "endpoint": {
          "serviceName": "brave-webmvc-example",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/foo",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.class",
        "value": "HomeController",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.method",
        "value": "foo",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      }
    ]
  },
  {
    "traceId": "a4aa11d855699355",
    "id": "c2c029d693ecc49b",
    "name": "get /bar",
    "parentId": "cf49951d471ac7c5",
    "timestamp": 1526110754397322,
    "duration": 1583187,
    "annotations": [
      {
        "timestamp": 1526110754397322,
        "value": "cs",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110755367168,
        "value": "sr",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110755810759,
        "value": "ss",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110755980509,
        "value": "cr",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      }
    ],
    "binaryAnnotations": [
      {
        "key": "ca",
        "value": true,
        "endpoint": {
          "serviceName": "",
          "ipv4": "127.0.0.1",
          "port": 64583
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/bar",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/bar",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.class",
        "value": "HomeController",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.method",
        "value": "bar",
        "endpoint": {
          "serviceName": "brave-webmvc-example3",
          "ipv4": "192.168.1.101"
        }
      }
    ]
  },
  {
    "traceId": "a4aa11d855699355",
    "id": "e3968cec8747ce95",
    "name": "get /tar",
    "parentId": "cf49951d471ac7c5",
    "timestamp": 1526110756017988,
    "duration": 1194871,
    "annotations": [
      {
        "timestamp": 1526110756017988,
        "value": "cs",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757081683,
        "value": "sr",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757212859,
        "value": "cr",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "timestamp": 1526110757222145,
        "value": "ss",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      }
    ],
    "binaryAnnotations": [
      {
        "key": "ca",
        "value": true,
        "endpoint": {
          "serviceName": "",
          "ipv4": "127.0.0.1",
          "port": 64584
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.method",
        "value": "GET",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/tar",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "http.path",
        "value": "/tar",
        "endpoint": {
          "serviceName": "brave-webmvc-example2",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.class",
        "value": "HomeController",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      },
      {
        "key": "mvc.controller.method",
        "value": "tar",
        "endpoint": {
          "serviceName": "brave-webmvc-example4",
          "ipv4": "192.168.1.101"
        }
      }
    ]
  }
]

5、zipkin client采集

目前官方提供了如下客户端插件进行追踪数据的采集(https://github.com/openzipkin/brave/tree/master/instrumentation)

这里写图片描述

k8s部署zipkin服务器端

apiVersion: extensions/v1beta1
kind: Deployment
metadata:
  name: zipkin
  namespace: logging
spec:
  replicas: 1
  template:
    metadata:
      labels:
        k8s-app: zipkin
    spec:
      containers:
      - name: zipkin
        image: openzipkin/zipkin
        ports:
          - containerPort: 9411
            hostPort: 9411
---
apiVersion: v1
kind: Service
metadata:
  name: zipkin
  namespace: logging
  labels:
    k8s-app: zipkin
spec:
  type: NodePort   # NodePort   LoadBalancer
  ports:
  - port: 9411
    targetPort: 9411
    nodePort: 30002
  selector:
    k8s-app: zipkin

这样打开网址http://xxx.xxx.xxx.xxx:30002就可以打开zipkin的ui界面了

在这里插入图片描述

至于client端, 可以各自的语言下部署了.

客户端推送地址:(REST API: http://xxx.xxx.xxx.xxx:9411/api/v1/spans)

数据格式

- traceId
- name
2401_87555420
关注
微服务架构系列文章、精品教程
全栈工程师开发手册（原创）https://github.com/tencentmusic/cube-studio
03-30 1万+
架构系列文章大全
springCloud- zipkin mysql 安装部署使用
杨杨杨~~的博客
02-13 819
如果您觉得有用的话，记得给，写作不易啊^ _ ^。而且听说，实在白嫖的话，那欢迎常来啊!!!Zipkin 是一个分布式追踪系统，用于收集和分析分布式应用中的请求流。它帮助开发者和运维人员了解微服务架构中不同服务之间的请求流动情况，特别是在多服务协作的环境下排查性能瓶颈和故障。
Zipkin部署
很多时候犯错都是在不知情的情况下发生的
03-14 1758
背景 系统中已存在以下三种类型的应用： - 采用Spring boot开发 - 采用传统的Spring Web开发 - 采用CXF开发 随着系统复杂性增多，现在需要引入Zipkin来监测系统中各节点的链路耗时。 功能特性 采用Kafka作为数据收集器 支持Sleuth采集方式 支持Brave采集方式 采用ElasticSearch作为数据源 搭建Zipkin服务器 ma...
SpringCloud链路追踪：Sleuth与Zipkin集成实现
程序媛学姐的博客
03-22 696
Spring Cloud Sleuth与Zipkin的集成为微服务架构提供了强大的分布式追踪能力，帮助开发团队深入理解系统行为、定位性能瓶颈和排查复杂问题。通过自动收集和传递跟踪上下文，Sleuth实现了对HTTP请求、异步操作和消息通信的全面覆盖，而Zipkin则提供了存储、查询和可视化功能。在实际应用中，链路追踪应当作为微服务可观测性体系的重要组成部分，与日志、指标监控等结合使用，共同构建全面的系统监控方案。
zipkin部署
架构师与哈苏
12-07 253
官网:https://zipkin.io/ java方式启动 curl -sSL https://zipkin.io/quickstart.sh | bash -s java -jar zipkin.jar 访问:http://your_host:9411 spring整合zipkin代码:gitee代码
K8S - 集群中部署Zipkin
迦南的专栏
04-22 4285
一、链路追踪部署流程 这里有两种部署流程，这里简单介绍下： 1、两种日志采集方式 方式一： 将链路日志直接推送到 Zipkin Server 进行聚合，存储到 ElasticSearch 中，最后再用 Zipkin UI 展示链路过程。 方式二： 将链路日志推送到 Kafka，然后启动 Zipkin Server 聚合日志，监听 Kafka ，如果有新的消息则进行拉取存入到 ElasticSeach，最后再用 Zipkin UI 展示链路过程。 两种方式的比较： 第一种方式使用与配置起来比较简单，并且
Zipkin 服务端部署
xu990128638的专栏
08-08 599
Zipkin 服务端部署 Zipkin 服务端部署非常简单，可以通过官网快速上手。 https://zipkin.io/pages/quickstart.html 1. 下载 Zipkin 最新 Jar 包 user@user-PC:/data$ curl -sSL https://zipkin.io/quickstart.sh | bash -s Thank you for trying Zipkin! This installer is provided as a quick-start helper,
Java Spring 框架的分布式系统设计原则
最新发布
Java大师兄的博客
04-16 1138
本文旨在为Java开发者提供使用Spring框架设计和实现分布式系统的全面指南。我们将重点讨论Spring Cloud生态系统中的核心组件及其在分布式环境中的应用，包括但不限于服务发现、API网关、配置中心、分布式追踪等。文章首先介绍分布式系统的基本概念和挑战，然后深入Spring Cloud的各个组件，接着通过实际案例展示如何应用这些原则，最后讨论未来发展趋势和常见问题解答。分布式系统：由多台计算机组成的系统，这些计算机通过网络通信并协调工作，对用户表现为一个统一的系统。微服务架构。
SkyWalking6.5+Nacos+Mysql集群部署
wang7241的博客
06-22 2474
本文只针对基于linux虚拟机的SkyWalking6.5.0版本（以下简称SW）安装部署，JDK8、MySql、Nacos的安装请参考其他文章。 一、介绍 这里只简单介绍一下SW，详细的小伙伴们还得自己去看文档，不要做一个伸手党！下面提供了链接地址，重要事情说五遍：不懂就多看文档 X 5！ 简介 SkyWalking: 一个开源的可观测平台, 用于从服务和云原生基础设施收集, 分析, 聚合及可视化数据。SkyWalking 提供了一种简便的方式来清晰地观测分布式系统, 甚至横跨多个云平台。SkyW
SpringCloud分布式微服务链路追踪方案：Skywalking
lucky_fd的博客
06-27 1684
SkyWalking架构设计整个架构，分成上、下、左、右四部分：考虑到让描述更简单，我们舍弃掉 Metric 指标相关，而着重在 Tracing 链路相关功能。上部分 Agent ：负责从应用中，收集链路信息，发送给 SkyWalking OAP 服务器。目前支持 SkyWalking、Zikpin、Jaeger 等提供的 Tracing 数据信息。而我们目前采用的是，SkyWalking Agent 收集 SkyWalking Tracing 数据，传递给服务器。
分布式链路追踪之Skywalking从入门到CRUD
我还可以
07-02 623
官网架构图： 上述架构图中主要分为四个部分，如下：下载地址：https://archive.apache.org/dist/skywalking/，下载对应的版本（本篇文章使用8.7.0），目录大致如下： 修改配置文件，这里配合nacos与es一起使用，配置文件为目录文件（oap服务的配置文件）； 对接nacos： 启动 其中bin目录下，与分别对应启动服务端与客户端，对应后缀同理，为前后端同时启动； 这里执行进行启动，下面为启动成功样式： 注意点：这时访问localhost:8080即可访问成功，但.
zipkin集群搭建
05-21
Linux系统下环境搭建zipikin集群，图文版本，易懂易操作。
zipkin
09-22
twitter的分布式跟踪系统
zipkin安装
01-02
很好的例子，可以借鉴。花了很久的时间，才总结的哟。。。。。。。。
CentOS下zipkin部署
mojolang
05-04 1530
Zipkin 是 Twitter 的一个开源项目，允许开发者收集 Twitter 各个服务上的监控数据，并提供查询接口。zipkin是Twitter基于Google的Dapper这篇论文编写的，因为是Twitter做的东西，很多依赖包都已经被墙，所以在编译、部署的时候一定要翻墙。 前期环境准备 zipkin用scala语言编写的，使用Cassandra数据库作为存储，所以在环境上我们要准备ja...
SpringCloud Zipkin 环境搭建
qq_33240556的博客
03-06 683
Spring Cloud Zipkin 是一个分布式追踪系统，它基于 Google 的 Dapper 论文实现的开源项目 Zipkin 进行扩展，与 Spring Cloud 紧密集成以提供服务间的调用链跟踪功能。请注意，实际生产环境中可能需要调整一些其他配置项，例如采样率、服务名自定义等。此外，在集群环境中部署 Zipkin 时，还需要考虑存储后端（如 Elasticsearch 或 MySQL）的选择和配置。确保所有微服务都配置了 Sleuth 和 Zipkin，并正确启动。
KubeSphere 部署 zipkin
秋叶清风的博客
07-24 426
KubeSphere 部署 zipkin
【教程分享】Docker搭建Zipkin，实现数据持久化到MySQL、ES
JavaEdge全是干货的技术号
08-27 1052
Zipkin Server默认将追踪数据信息保存到内存，重启服务后追踪数据将不存在，Zipkin支持将追踪数据持久化到MySQL或ES。启动zipkin-server并请求，再次重启zipkin-server，可见依然存在请求链路录记录，并且MySQL表中存在记录。ES组件使用Elasticsearch 5+的功能，但已测试过与Elasticsearch 6-7.x的兼容性。若连接ES集群，--ES_HOSTS通过逗号分割，如：--ES_HOSTS=无需建立啥配置信息，只需启动jar时指定ES地址。
Spring Cloud分布式追踪Demo：Sleuth+RabbitMQ+Zipkin实现
Spring Cloud Sleuth是Spring Cloud的一个组件，用于提供链路追踪的能力，而Zipkin则是一个开源的分布式跟踪系统，它能够收集和分析这些追踪数据。RabbitMQ作为消息队列中间件，在分布式系统中起到了传递消息的作用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值