OpenTelemetry 实现方案
创始人
2024-05-30 10:10:43
0

OpenTelemetry 有很多种组合和实现方案,我们分别来了解一下 OpenTelemetry 在三种不同技术架构下的使用方式。

1、OpenTelemetry to 开源工具组合

作为经典的对各种遥测数据的处理架构,开源工具可将不同类型的数据存储在不同的平台,比如日志存放在 ELK,追踪存放在 Jaeger 这类的 APM 工具,而指标保存在 Prometheus 并通过 Grafana 进行视图展示。组件的整体配置如下图所示:

 我们以一个 SpringBoot 应用为例,解读一下数据采集和传输的过程:

  • 应用服务端和客户端将指标、链路追踪数据推送到 Collector;
  • Front-app 作为前端链路,将链路追踪信息推送到 Collector,并访问应用服务 API;
  • Collector 对数据进行收集和转换后,将数据推送到 Jaeger;
  • 同时, Prometheus 从 Collector 拉取数据。

日志有下面两种收集方式。

方式一,通过 OTLP 上报日志:应用服务端和客户端将日志通过 Exporter 推送到 Collector,再通过 Collector 输出到 Elasticsearch。 但由于 OpenTelemetry 在 log 方面还不稳定,所以推荐单独处理日志,不走 Collector。

方式二,通过 Logback 上报日志:应用服务端和客户端将日志通过 Logback 推送到 Logstash(需要使用 Logstash-Logback 组件,是 Logstash 的 Logback 实现)。这是一种更加推荐的方式。

2、OpenTelemetry to Grafana

随着这两年可观测的流行,Grafana 也开始进军可观测行业。使用 Grafana 对接 OpenTelemetry 的架构如下图所示,这里面主要用到 Grafana Tempo 和 Loki 两个组件。

  •  Grafana Tempo 是一个开源、易于使用且大规模的分布式追踪后端。Tempo 具有成本效益,只需要对象存储即可运行,而且它可以和 Grafana、Prometheus 、 Loki 深度集成。Tempo 可以与任何开源跟踪协议一起使用,包括 Jaeger、Zipkin 、 OpenTelemetry。
  • Loki 是 Grafana Labs 团队最新的开源项目,是一个水平可扩展,高可用性,多租户的日志聚合系统。Loki 的设计非常经济高效且易于操作,因为它不会为日志内容编制索引,而会为每个日志流编制一组标签。

执行流程主要包括以下 4 步。

  • OpenTelemetry 采集输出 Springboot 应用的链路追踪数据,并为对应的日志打上 TraceID、SpanID 等标签。T
  • empo 收集处理 OpenTelemetry 数据并本地化存储,Tempo Query 为 Tempo 的检索后端服务。
  • Loki 收集 Springboot 应用的日志数据。
  • 最后,我们可以通过 Grafana Dashboard 展示和查看 Tempo 链路追踪和日志数据。

“ Grafana Tempo + Loki” 这个组合能够让我们直观地看到日志链路情况,但 Loki 的特性也决定了它并不能高效分析和处理大型生产系统的日志。日志链路只是可观测的一部分,仅仅通过日志链路查询并不能解决大部分问题,特别是在微服务云原生架构时代,多种多样的问题需要我们结合各方面进行分析。

3、OpenTelemetry to 观测云

观测云允许包括开发、测试、运维在内的所有团队成员在一套统一的可观测数据体系下客观分析与定位故障,便于高效地协作。观测云能够采集指标、链路、日志以及所有的可观测数据,并将它们进行关联和整合分析,实现系统完整的可观测性。

观测云的数据采集 Agent 是 DataKit ,它能够支持主机和容器的环境。

  • 在主机环境下, 每个主机都有一个 DataKit , 数据会先打给本地的 DataKit , 由 DataKit 缓存,预处理,然后上报到观测云的数据网关。这就在避免了网络抖动的同时,附带了边缘处理能力,缓解了后台处理数据的压力。
  • 在 Kubernetes 环境下, 每个节点(即 Node)都有一个 DataKit 的 DaemonSet,通过 Kubernetes 的 local traffic 机制,每个节点中 Pod 的数据都会先发送本地的 DataKit。这就在避免网络抖动的同时, 为链路追踪数据增加了 Pod 和 Node 标签,能够有效地关联数据。

由于 DataKit 是接收 OTLP 协议的,所以我们可以把 OpenTelemetry Collector 的 Exporter 设置为 OTLP(指向 DataKit),也可以直接将数据打给 DataKit。因此这里有两种方案。

方案一:

 方案二:

 此文章为3月Day7 学习笔记,内容来源于极客时间《深入浅出可观测性》,推荐该课程。

相关内容

热门资讯

手机安卓系统越高越好,探索最新... 你有没有发现,每次手机更新系统,你的手机就像脱胎换骨了一样?没错,说的就是你,那个安卓手机!今天,咱...
鸿蒙系统怎么用回安卓,轻松实现... 你是不是也和我一样,对鸿蒙系统的新鲜感还没过,却又忍不住想回到熟悉的安卓世界?别急,今天就来手把手教...
苹果7跟安卓系统,性能对决与用... 你有没有想过,为什么苹果7那么受欢迎,而安卓系统却有着庞大的用户群体?今天,我们就来聊聊这个话题,看...
安卓手机刷简化系统,轻松实现流... 你有没有想过,你的安卓手机其实可以变得更加轻快、流畅呢?没错,就是通过刷简化系统!今天,就让我带你一...
社保掌上通安卓系统,轻松掌握在... 你有没有发现,现在的生活越来越离不开手机了?无论是购物、聊天还是办公,手机都能轻松搞定。这不,今天就...
安卓系统便宜的手机,盘点安卓系... 你有没有想过,拥有一部安卓系统的手机,却不用花大价钱?现在,我就要给你揭秘那些价格亲民,性能却不打折...
安卓8.0系统单机游戏,探索单... 你有没有发现,自从安卓8.0系统更新后,手机里的游戏体验简直像开了挂一样?没错,今天就来聊聊这个话题...
适合安卓系统平板笔记,高效笔记... 你有没有发现,随着科技的发展,平板电脑已经成为了我们生活中不可或缺的好伙伴呢!尤其是安卓系统的平板,...
旗鱼平板刷安卓系统,畅享智能生... 你有没有想过,你的旗鱼平板刷上安卓系统后,世界会变得多么精彩?想象那些原本只能在电脑上畅游的APP,...
安卓系统更新强行停止,揭秘原因... 最近你的安卓手机是不是也遇到了一个让人头疼的问题?没错,就是安卓系统更新突然强行停止了!这可真是让人...
安卓系统如何备份图片,轻松保存... 手机里的照片可是我们珍贵的回忆啊!有没有想过,万一手机不小心摔了或者丢失了,那些珍贵的瞬间可就找不回...
安卓主流系统哪个好用,探寻最佳... 你有没有想过,手机里的安卓系统就像是我们生活中的各种品牌,各有各的特色和魅力。那么,这么多安卓系统里...
喜欢苹果像素安卓系统,系统之魂 你有没有发现,身边的朋友对手机的选择越来越有个性了呢?有的人偏爱苹果的优雅,有的人则钟情于安卓的活力...
安卓xp系统哪个好用,探寻最佳... 你有没有想过,手机系统就像是我们生活中的各种软件,各有各的特色和优势。今天,咱们就来聊聊安卓系统中的...
安卓系统云端怎么备份,轻松实现... 你有没有想过,手机里的那些珍贵的照片、视频和文件,万一不小心丢失了怎么办?别担心,今天就来给你支个招...
安卓系统9.0与ios,系统革... 你知道吗?在智能手机的世界里,安卓系统和iOS系统就像是一对相爱相杀的“欢喜冤家”。今天,咱们就来聊...
新机安卓怎么激活系统,体验流畅... 你新入手的安卓手机是不是有点儿蒙圈?别急,今天就来手把手教你如何激活系统,让你的新机焕发活力!?一、...
如何删除安卓系统信息,安卓系统... 手机里的信息越来越多,是不是感觉自己的隐私都快要被暴露无遗了?别担心,今天就来教你怎么轻松删除安卓系...
国产安卓系统哪个流畅,揭秘哪家... 你有没有想过,手机里的操作系统就像是我们的大脑,有时候它运行得快慢,直接影响我们的使用体验呢?今天,...
安卓怎么刷主机系统,掌握主机系... 你有没有想过,你的安卓手机或者平板,是不是也能像电脑一样,装上各种酷炫的系统呢?没错,今天就要来给你...