使用 Data Links 从 Grafana 链接到 Jaeger 会遇到错误的跟踪

Question

我们正在努力将 Grafana、Jaeger、Prometheus 和其他工具整合到我们的生产环境中。

在这个过程中，我们为各种服务/操作设置了图表，我们希望能够在 Grafana Explorer 或 Jaeger 本身中直接从图表中的“Spike”到跟踪 go，但这里似乎喜欢的东西不太匹配。

我们已经设法通过首先转换数据字段（将它们重命名为“组织字段”）来使数据链接正常工作，否则，我们无法使链接模板正常工作。 跟踪 ID 已重命名为 TraceId。

然后我们使用以下模板将数据链接添加到当前本地的图表中： http://localhost:16686/trace/${__data.fields['TraceId']}

所以尝试总结 - 给定一个非常简单的图表：

• 类型： Time Series
• 数据来源： Jaeger
• 查询： Service=<Our Service>, Operation=All, Tags="category=REQUEST"
• 限制： 2500

转换：

• 组织字段： Trace ID -> TraceId

数据链接：

• 积家： http://localhost:16686/trace/${__data.fields['TraceId']}

---

现在，这似乎首先起作用。 但是，我们的问题是 ID 没有正确匹配。 因此，当我们有例如 10 秒的尖峰并在图中单击它时，获取上下文菜单，然后单击上面的链接，我们 go 到一个完全不同的轨迹。

我试图放大并看到当数据链接出现在工具提示中时，持续时间与我想看到的轨迹相匹配。

然后我终于过滤了一些东西，在图表中只有 4 个点（轨迹），我发现与图表相比，链接看起来是反向的。

因此，图表中有 4 个数据点，如下所示：（ Id=What Id 似乎是 Jaeger 中的正确匹配，采用了时间和持续时间）

2022-08-04T08:36:57.402, 3.91 ms, ( Id=ea801f08b37f64cd374fbc28f52e38f6 )
2022-08-04T08:36:57.403, 2.90 ms, ( Id=eecf656be29f783d5c0ecae1113827d8 )
2022-08-04T08:36:57.409, 4.43 ms, ( Id=06da4ae77a124e6eb4eca3a63a65e115 )
2022-08-04T08:36:57.416, 3.06 ms, ( Id=3ddb2e5b37309fec68a163d35fc929e8 )

然而链接却是这样的：

2022-08-04T08:36:57.402, 3.91 ms, Link=http://localhost:16686/trace/3ddb2e5b37309fec68a163d35fc929e8
2022-08-04T08:36:57.403, 2.90 ms, Link=http://localhost:16686/trace/06da4ae77a124e6eb4eca3a63a65e115
2022-08-04T08:36:57.409, 4.43 ms, Link=http://localhost:16686/trace/eecf656be29f783d5c0ecae1113827d8
2022-08-04T08:36:57.416, 3.06 ms, Link=http://localhost:16686/trace/ea801f08b37f64cd374fbc28f52e38f6

这似乎是一致的，所以有人对我们做错了什么有任何线索吗？ 随时询问具体细节。 我不确定要分享什么。