OpenShift 4 - 可观测性之通过向被观测应用注入OpenTelemetry Agent 实现 Distributed Tracing（附视频）

最新推荐文章于 2024-05-14 08:08:22 发布
最新推荐文章于 2024-05-14 08:08:22 发布
阅读量288 收藏
点赞数
文章标签： openshift
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43902588/article/details/131261052
版权

《OpenShift / RHEL / DevSecOps 汇总目录》
说明：本文已经在支持 OpenShift 4.13 的环境中验证

文章目录

从应用获取跟踪数据的两种方法

OpenTelemetry 从被跟踪应用获取跟踪数据可以使用两种手段：手动手段和自动手段。它们的实现方法区别如下表：
在这里插入图片描述
本文重点介绍的 Auto Instrumentation 需要在 Operator 中创建一个 Instrumentation 对象，它为自动通过 Sidecar 注入的 Agent 提供配置。根据该配置，从被跟踪应用收集的数据将发送给指定的 Collector 收集器。
在这里插入图片描述

部署 Distributed Tracing 运行环境

首先创建一个测试项目。

$ oc new-project app-observ

安装配置 Distributed Tracing Platform Opeartor

  1. 使用缺省配置安装 OpenShift Distributed Tracing Platform Opeartor。
  2. 在 OpenShift Distributed Tracing Platform Opeartor 中基于以下 YAML 创建一个 Jaeger 运行实例。
kind: Jaeger
apiVersion: jaegertracing.io/v1
metadata:
  name: jaeger-all-in-one-inmemory
  namespace: app-observ
spec:
  strategy: allInOne
  1. 查看 Jaeger 相关服务和使用的端口。
$ oc get svc
NAME                                                    TYPE        CLUSTER-IP       EXTERNAL-IP   PORT(S)                                                    AGE
service/jaeger-all-in-one-inmemory-agent                ClusterIP   None             <none>        5775/UDP,5778/TCP,6831/UDP,6832/UDP                        76m
service/jaeger-all-in-one-inmemory-collector            ClusterIP   172.30.75.167    <none>        9411/TCP,14250/TCP,14267/TCP,14268/TCP,4317/TCP,4318/TCP   76m
service/jaeger-all-in-one-inmemory-collector-headless   ClusterIP   None             <none>        9411/TCP,14250/TCP,14267/TCP,14268/TCP,4317/TCP,4318/TCP   76m
service/jaeger-all-in-one-inmemory-query                ClusterIP   172.30.134.109   <none>        443/TCP,16685/TCP                                          76m

另外还可以在 OpenShift 控制台的开发者视图中查看和 aeger-all-in-one-inmemory 部署相关的服务，其中 jaeger-all-in-on-inmemory-collector 服务显示了其使用的端口和对应的访问协议。
在这里插入图片描述

  1. 获得 Jaeger 控制台的访问地址，然后用浏览器访问。
$ oc get route jaeger-all-in-one-inmemory -o jsonpath='{.spec.host}'
jaeger-all-in-one-inmemory.apps.cluster-lqbff.lqbff.sandbox2053.opentlc.com

在这里插入图片描述

配置 Distributed Tracing Data Collection Opeartor

  1. 使用缺省配置安装 OpenShift Distributed Tracing Data Collection Opeartor。
  2. 在 OpenShift Distributed Tracing Data Collection Opeartor 中使用以下 YAML 创建一个 OpenTelemetry Instrumentation 实例，它用来说明使用何种配置向运行应用的 Pod 自动注入 Sidecar 容器。注意：spec.exporter 定义了缺省的数据出口使用的服务地址，由于 dotnet 和 pytho 使用的 Agent 使用了不同的传输协议，因此在 OTEL_EXPORTER_OTLP_ENDPOINT 环境变量中设置了非缺省的 exporter 地址。
apiVersion: opentelemetry.io/v1alpha1
kind: Instrumentation
metadata:
  name: instrumentation
  namespace: app-observ
spec:
  exporter:
    endpoint: 'http://jaeger-all-in-one-inmemory-collector:4317'
  dotnet:
    env:
      - name: OTEL_EXPORTER_OTLP_ENDPOINT
        value: 'http://jaeger-all-in-one-inmemory-collector:4318'
  python:
    env:
      - name: OTEL_EXPORTER_OTLP_ENDPOINT
        value: 'http://jaeger-all-in-one-inmemory-collector:4318'

安装测试应用并进行观测跟踪

部署 Java 应用并注入 Auto-Instrumentation

  1. 在 OpenShift 的开发者视图中点击“添加” 菜单，在“添加” 页面中找到 “样本” 并点击进入。
  2. 在 “样本” 页面中按照 java 搜索到 Basic Spring Boot，然后点击进入。
    在这里插入图片描述
  3. 在页面中将名称设为 springboot-app，然后点击 “创建”。
    在这里插入图片描述
  4. 当应用已经部署完成后执行以下命令，向部署增加自动诸如 OpenTelemetry Instrumentation 的注释。
$ `oc patch deployment springboot-app -p '{"spec": {"template": {"metadata": {"annotations": {"instrumentation.opentelemetry.io/inject-java": "true"}}}}}'`

也可以直接向 springboot-app 部署追加以下的 YAML。

  annotations:
    instrumentation.opentelemetry.io/inject-java: 'true'

在这里插入图片描述

  1. 执行以下命令，确认 pod 中已经有 2 个容器了，其中一个为 opentelemetry-auto-instrumentation。
$ oc get pod -l app=springboot-app -o custom-columns=CONTAINER:.spec.containers[0].name,SIDECAR-CONTAINER:.spec.initContainers[0].name
CONTAINER        SIDECAR-CONTAINER
springboot-app   opentelemetry-auto-instrumentation

  1. 查看 springboot-app-xxxx 的 Pod 日志，确认其中为 javaagent 参数设置了 otel-auto-instrumentation/javaagent.jar。
    在这里插入图片描述

  2. 执行命令访问应用。

$ curl $(oc get route springboot-app -o jsonpath={.spec.host})
Hello World!
  1. 刷新 Jaeger 控制台，在 Service 选中 springboot-app，点击 Find Traces 后可以看到跟踪到的请求和用时。
    在这里插入图片描述

部署 Nodejs 应用并注入 Auto-Instrumentation

  1. 在 OpenShift 的开发者视图中点击“添加” 菜单，在“添加” 页面中找到 “样本” 并点击进入。
  2. 在 “样本” 页面中按照 node.js 搜索到 Basic Node.js，然后点击进入。
    在这里插入图片描述
  3. 在页面中将名称设为 nodejs-app，然后点击 “创建”。
    在这里插入图片描述
  4. 当应用已经部署完成后执行以下命令，向部署增加自动诸如 OpenTelemetry Instrumentation 的注释。
$ oc patch deployment nodejs-app -p '{"spec": {"template": {"metadata": {"annotations": {"instrumentation.opentelemetry.io/inject-nodejs": "true"}}}}}'
  1. 执行以下命令，确认 pod 中已经有 2 个容器了，其中一个为 opentelemetry-auto-instrumentation。
$ oc get pod -l name=nodejs-app -o custom-columns=CONTAINER:.spec.containers[0].name,SIDECAR-CONTAINER:.spec.initContainers[0].name
CONTAINER    SIDECAR-CONTAINER
nodejs-app   opentelemetry-auto-instrumentation
  1. 执行命令访问应用。
$ curl $(oc get route nodejs-app -o jsonpath={.spec.host})
Hello from Node.js Starter Application!
  1. 刷新 Jaeger 控制台，在 Service 选中 nodejs-app，点击 Find Traces 后可以看到跟踪到的请求和用时。
    在这里插入图片描述

部署 Python 应用并注入 Auto-Instrumentation

  1. 在 OpenShift 的开发者视图中点击“添加” 菜单，在“添加” 页面中找到 “样本” 并点击进入。
  2. 在 “样本” 页面中按照 python 搜索到 Basic Python，然后点击进入。
    在这里插入图片描述
  3. 在页面中将名称设为 python-app，然后点击 “创建”。
    在这里插入图片描述
  4. 当应用已经部署完成后执行以下命令，向部署增加自动诸如 OpenTelemetry Instrumentation 的注释。
$ oc patch deployment python-app -p '{"spec": {"template": {"metadata": {"annotations": {"instrumentation.opentelemetry.io/inject-python": "true"}}}}}'
  1. 执行以下命令，确认 pod 中已经有 2 个容器了，其中一个为 opentelemetry-auto-instrumentation。
$ oc get pod -l name=python-app -o custom-columns=CONTAINER:.spec.containers[0].name,SIDECAR-CONTAINER:.spec.initContainers[0].name
CONTAINER    SIDECAR-CONTAINER
python-app   opentelemetry-auto-instrumentation

  1. 在应用对应的 Pod 查看环境，其中 python-app 容器用到的变量名 OTEL_EXPORTER_OTLP_ENDPOINT 的值是 http://jaeger-all-in-one-inmemory-collector:4318
    在这里插入图片描述

  2. 执行命令访问应用。

$ curl $(oc get route python-app -o jsonpath={.spec.host})
Hello World!
  1. 刷新 Jaeger 控制台，在 Service 选中 python-app，点击 Find Traces 后可以看到跟踪到的请求和用时。
    在这里插入图片描述

部署 .Net 应用并注入 Auto-Instrumentation

  1. 在 OpenShift 的开发者视图中点击“添加” 菜单，在“添加” 页面中找到 “样本” 并点击进入。
  2. 在 “样本” 页面中按照 .NET 搜索到 .NET，然后点击进入。
    在这里插入图片描述
  3. 在页面中将名称设为 dotnet-app，然后点击 “创建”。
    在这里插入图片描述
  4. 当应用已经部署完成后执行以下命令，向部署增加自动诸如 OpenTelemetry Instrumentation 的注释。
$ oc patch deployment dotnet-app -p '{"spec": {"template": {"metadata": {"annotations": {"instrumentation.opentelemetry.io/inject-dotnet": "true"}}}}}'
  1. 执行以下命令，确认 pod 中已经有 2 个容器了，其中一个为 opentelemetry-auto-instrumentation。
$ oc get pod -l name=dotnet-app -o custom-columns=CONTAINER:.spec.containers[0].name,SIDECAR-CONTAINER:.spec.initContainers[0].name
CONTAINER    SIDECAR-CONTAINER
dotnet-app   opentelemetry-auto-instrumentation
  1. 在应用对应的 Pod 查看环境，其中 dotnet-app 容器用到的变量名 OTEL_EXPORTER_OTLP_ENDPOINT 的值是 http://jaeger-all-in-one-inmemory-collector:4318
    在这里插入图片描述
  2. 执行命令访问应用。
$ curl $(oc get route notnet-app -o jsonpath={.spec.host})
  1. 刷新 Jaeger 控制台，在 Service 选中 dotnet-app，点击 Find Traces 后可以看到跟踪到的请求和用时。
    在这里插入图片描述

部署 Quarkus 的 SuperHero 应用

  1. 执行命令，部署 SuperHero 相关资源。
$ oc apply -f https://raw.githubusercontent.com/liuxiaoyu-git/OpenShift-HOL/master/superhero.yaml

在这里插入图片描述

  1. 获取 ui-super-heroes 的访问地址，然后用浏览器访问。
$ oc get route ui-super-heroes -ojsonpath={.spec.host}
ui-super-heroes-app-observ.apps.cluster-dqmxw.dqmxw.sandbox431.opentlc.com
  1. 在 Jaeger 中可查看 up-super-heroes 服务以及请求跟踪。
    在这里插入图片描述

视频

演示视频

参考

https://medium.com/opentelemetry/using-opentelemetry-auto-instrumentation-agents-in-kubernetes-869ec0f42377
https://medium.com/@akashjoffical08/implement-distributed-tracing-with-jaeger-opentelemetry-on-kubernetes-3e35cb77b536
https://medium.com/@magstherdev/opentelemetry-up-and-running-b4c58eaf8c05
https://opentelemetry.io/docs/k8s-operator/automatic/
https://opentelemetry.io/docs/demo/architecture/
https://www.aneasystone.com/archives/2022/11/opentelemetry-observability.html
https://www.aspecto.io/blog/what-is-opentelemetry-the-infinitive-guide/
https://developers.redhat.com/articles/2023/03/22/how-enable-opentelemetry-traces-react-applications
https://github.com/jpkrohling/opentelemetry-collector-deployment-patterns
https://github.com/open-telemetry/opentelemetry-operator/blob/main/README.md
https://github.com/rbaumgar/otelcol-demo-app/blob/main/ServicePerformanceMonitoring.md

dawnsky.liu
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
opentelemetry-java-instrumentation：适用于Java的OpenTelemetry自动仪器和工具库
02-17
•• •• 适用于Java的OpenTelemetry Instrumentation 关于 该项目提供了Java代理JAR，该Java代理JAR可以附加到任何Java 8+应用程序，并动态注入字节码以捕获来自许多流行的库和框架的遥测。 您可以采用多种格式导出遥测数据。 您还可以通过命令行参数或环境变量来配置代理和导出器。 最终结果是无需更改代码即可从Java应用程序收集遥测数据的能力。 入门 下载。 该软件包包括检测代理以及所有受支持的库和所有可用数据导出器的检测。 该软件包提供了一种全自动的，即开即用的体验。 使用JVM的-javaagent标志启用检测代理。 java -javaagent:path/to/opentelemetry-javaagent-all.jar \ -jar myapp.jar 默认情况下，OpenTelemetry Java代理使用程序，该
opentelemetry之分布式链路追踪 -- 10.openresty agent环境构建
piaobeizu2011的专栏
05-20 2231
本文从源代码级别做了相应的编译工作，所以，如果有小伙伴想对官方的 nginx instrumentation 进行二次开发或者根据需求自己编译so文件，都可以参考本文的实践过程。
OpenTelemetry agent 对 Spring Boot 应用的影响：一次 SPI 失效的调查
最新发布
crossoverJie专栏
05-14 1054
背景前段时间公司领导让我排查一个关于在 JDK21 环境中使用 Spring Boot 配合一个 JDK18 新增的一个 SPI(java.net.spi.InetAddressResolverProvider) 不生效的问题。但这个不生效的前置条件有点多：JDK 的版本得在 18+SpringBoot3.x还在额外再配合使用 -javaagent:opentelemetry-javaagent....
OpenTelemetry In Java之自动检测Agent配置
MCC_MCC_MCC的博客
05-24 931
SDK 的自动配置模块用于代理的基本配置，阅读以查找配置导出或采样等设置。
OpenTelemetry 系列 （四）｜ 如何使用 Java Agent 来实现无侵入的调用链
Q54665642ljf的博客
12-25 2609
Java Agent一般可以被称为探针，是一种可以在 Java 应启动前和运行中修改应用的字节码的技术。通过在启动项中添加来制定使用特定的 Agent。是一个隶属于 OpenTelemetry 系列的项目，这个项目就是一个基于Java Agent来实现无侵入式接入的官方 Agent 项目。复制代码将下载下来，然后使用上述指令就能够运行，在启动成功后就能够直接接入成功，而不用对应用本身的代码进行任何的修改。在这个篇章中我们简单的介绍了的使用，实际上这个项目支持了不少自定义的扩展能力。
openshift4-vmware-upi：支持在VMware上自动安装OpenShift 4的Ansible手册和文档
01-31
之所以需要进行此更改，是因为OpenShift 4.6现在使用点火规范v3（OpenShift的早期版本使用v2）。 有关更改的更多详细信息，请参见。 背景 这是在RHV上自动化OpenShift 4部署的的延续。 目标是自动化辅助节点（用于...
openshift4-rhv-upi：支持使用Baremetal UPI在RHV上自动安装OpenShift 4的Ansible手册和文档
02-02
使用Baremetal UPI在RHV上配置OpenShift 4.4 该存储库包含一组手册，以帮助促进OpenShift 4.4在RHV上的部署。 背景 该存储库中的剧本/脚本应该可以帮助您自动化RHV上的绝大多数OpenShift 4.4 UPI部署。 请务必阅读...
openshift-node-app:OpenShift 解决方案教程中可扩展 Web 应用程序的配套代码示例
05-31
OpenShift 上的可扩展 Web 应用程序 此存储库是的配套代码示例 本教程将引导您逐步将代码推送到私有Git存储库，将其部署到IBM Cloud集群上的Red Hat OpenShift，然后自动进行构建和部署过程。 此外，您还将学习如何...
openshift-install-power:Bash安装助手可使用Terraform IaC在IBM Power Systems Virtual Server上部署OpenShift 4
04-01
在PowerVS上安装OpenShift介绍该项目包含一个bash脚本，可帮助您 （PowerVS）IBM:registered:Power 部署OpenShift Container Platform4.X。 的Terraform代码用于部署过程。 确保您的PowerVS实例已准备好部署...
OpenShift4-tools:OpenShift 4工具
04-08
OpenShift4-工具 安装工具等。OpenShift 4集群。 目录 集群实用程序 oinst ：OpenShift 4.x安装程序包装器，当前适用于AWS，GCE和libvirt。 您可能需要安装kubechart（github.com/sjenning/kubechart/kubechart）...
OpenTelemetry系列 （四）｜ 如何使用Java Agent来实现无侵入的调用链
BASK2311的博客
02-07 733
Java Agent一般可以被称为探针，是一种可以在Java应启动前和运行中修改应用的字节码的技术。通过在启动项中添加来制定使用特定的Agent。是一个隶属于OpenTelemetry系列的项目，这个项目就是一个基于Java Agent来实现无侵入式接入的官方Agent项目。复制代码将下载下来，然后使用上述指令就能够运行，在启动成功后就能够直接接入成功，而不用对应用本身的代码进行任何的修改。在这个篇章中我们简单的介绍了的使用，实际上这个项目支持了不少自定义的扩展能力。在下一个篇章中，会着重介绍如何在。
OpenTelemetry系列 - 第2篇 Java端接入OpenTelemetry
罗小爬的技术宝书
12-02 3896
目录一、架构说明二、方式1 - 自动化2.1 opentelemetry-javaagent.jar（Java8+ ）2.2 使用opentelemetry-javaagent.jar完成自动注入2.3 配置opentelemetry-javaagent.jar2.4 使用注解（@WithSpan, @SpanAttribute）2.5.1 代码集成@WithSpan, @SpanAttribute2.5.2 禁用已标注@WithSpan的方法的自动注入：2.5.3 不修改代码的情况下启用@WithSpan
OpenTelemetry-结束分布式追踪的江湖之乱
qq_35427785的博客
02-07 5086
部分内容摘自：《OpenTelemetry中文文档-OT.md》 一、江湖乱象 分布式追踪，随着分布式系统的流行而兴起。在分布式系统中，往往存在一个单一的用户请求中，可能会需要大量微服务的处理后，才能完成这个请求，在微服务中的任何一个服务的失败或性能低下，都会对于用户请求的响应造成极大影响。随着业务的不断扩张，这个调用链的也就会越来越复杂。为了解决微服务架构中请求链路过长导致的问题定位和监控难问题，链路追踪产品也就应运而生。 目前的主流开源产品有Zipkin、Jaeger、PinPoint等。市场上产
OpenShift 4 - 可观测性之用 OpenTelemetry+Jaeger 实现 Distributed Tracing
多恩斯基的博客
07-24 465
说明：本文已经在支持 OpenShift 4.13 的环境中验证。
阿里one java agent的可插拔java agent运行
隐0士的博客
05-07 2831
基于one java agent的可插拔java agent方案 背景 第⼀阶段：⾃研微服务 阿⾥巴巴的微服务拆分实践进⾏的很早，从 2008 年就开始了，当时的单体应⽤已经⽆法承载业务迭代的速度，由五彩⽯项⽬开始了微服务化的改造，在这个改造过程中，也逐步诞⽣了服务框架，消息队列，数据库分库分表等三⼤中间件。在这个阶段的服务治理能⼒是通过 SDK⽅式直接依赖在框架⾥⾯的。每个中间件都有⾃⼰独⽴的 SDK 依赖，服务治理能⼒的升级需要借助框架 SDK 的升级来解决，升级成本是很⾼的。 第⼆阶段：Fat-SDK
OpenTelemetry-可观察性的新时代
chikuai9995的博客
07-22 614
有幸在2019KubeCon上海站听到Steve Flanders关于OpenTelemetry的演讲，之前Ops领域两个网红项目OpenTracing和OpenCensus终于走到了一起，可观察性统一的标准化已经扬帆起航。 这篇文章旨在抛砖引玉，希望能够和更多的同学一起交流可观察性相关...
可观测性能力升级，Apache APISIX 集成 OpenTelemetry
ApacheAPISIX的博客
03-08 2407
本文为您介绍 Apache APISIX opentelemetry 插件概念以及如何如何开启和部署 opentelemetry 插件。 背景信息 Apache APISIX 是一个动态、实时、高性能的 API 网关，提供负载均衡、动态上游、灰度发布、服务熔断、身份认证、可观测性等丰富的流量管理功能。作为 API 网关，Apache APISIX 不仅拥有众多实用的插件，而且支持插件动态变更和热插拔。 OpenTelemetry 是一个开源的遥测数据采集和处理系统，它不仅提供了各种 SDK 用于应用端遥测数
在Kubernetes上部署OpenTelemetry收集器
lfcncf的博客
02-02 1406
10人将获赠CNCF商店$100美元礼券！ 你填了吗？ 问卷链接（https://www.wjx.cn/jq/9714648…） 作者：Juraci Paixão Kröhling OpenTelemetry 收集器是一个二进制程序，通常作为代理部署在运行业务应用程序的主机上，但是现在越来越多的应用程序运行在像 Kubernetes 这样的容器平台上。 在 Kubernetes 上运行 OpenTelemetry 收集器需要什么呢？ OpenTelemetry 收集器项目附带了一个示例文件以供 Kub
openshift internal-registry 切换 sc
05-25
oc get cm image-registry-config -n openshift-image-registry -ojsonpath='{.data.storage}' ``` 2. 在输出中找到当前使用的 StorageClass 的名称，例如 `default`. 3. 创建一个新的 StorageClass，例如 `new-sc...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值