腾讯mini项目-【指标监控服务重构】2023-07-29

今日已办

根据导师代码评审的 comment 改进

  1. 修改命名 otelclient.otelExporterOtlpEndpoint to otelclient.endpoint
  2. 禁用 TLS 加密,移除 otelclient.insecureMode
  3. 避免命名缩写影响代码的阅读理解
  4. 把两个函数(createTraceExpcreateTraceProvider)合并
  5. 移除没有太大意义的封装handleErr
  6. 将 otel 初始化逻辑放到 consume 子命令中进行
  7. 还原 README.md 的内容
  8. 经过组员 郑兆隆 对 Log 逻辑的修改,Log 可以在 docker容器内部 和 SigNoz Web 都生效

调研

整个链路都要带上backend_id,调研是否有让trace带attribute的方法,而不是每个span都手动加上

Trace 下的所有 span

在使用 OpenTelemetry SDK 进行分布式追踪时,可以通过在 span 上设置属性(attribute)来添加自定义信息,以便更好地理解和调试应用程序的行为。要让一个 trace 下的所有 span 都带上 attribute,可以使用 OpenTelemetry SDK 提供的 Span Processor。

下面是一个示例代码,展示了如何使用 Span Processor 将指定的 attribute 添加到 trace 下的所有 span 中:

go 复制代码
package main

import (
	"context"

	"go.opentelemetry.io/otel"
	"go.opentelemetry.io/otel/attribute"
	"go.opentelemetry.io/otel/exporters/stdout"
	sdktrace "go.opentelemetry.io/otel/sdk/trace"
)

func main() {
	// 创建一个 stdout exporter,将 span 输出到控制台
	exporter, err := stdout.NewExporter(stdout.WithPrettyPrint())
	if err != nil {
		panic(err)
	}

	// 创建一个 trace provider,使用 stdout exporter 输出 span
	provider := sdktrace.NewTracerProvider(sdktrace.WithBatcher(exporter))

	// 设置全局 trace provider
	otel.SetTracerProvider(provider)

	// 创建一个 span processor,将指定的 attribute 添加到所有 span 中
	processor := sdktrace.NewSimpleSpanProcessor(func(span sdktrace.ReadOnlySpan) {
		span.SetAttributes(attribute.String("my_attribute", "my_value"))
	})

	// 将 span processor 添加到 trace provider 中
	provider.RegisterSpanProcessor(processor)

	// 创建一个新的 span
	tracer := otel.Tracer("example")
	ctx, span := tracer.Start(context.Background(), "my_span")
	defer span.End()

	// 在 span 上设置其他 attribute
	span.SetAttributes(attribute.String("another_attribute", "another_value"))

	// 执行其他操作...
}

在上面的示例代码中,使用 sdktrace.NewSimpleSpanProcessor 创建了一个简单的 Span Processor,该处理器会调用指定的函数,并将当前 span 作为参数传递给该函数。在该函数中,可以使用 span.SetAttributes 方法添加需要的 attribute。然后,将该 Span Processor 添加到 trace provider 中,即可让所有的 span 都带上该 attribute。

需要注意的是,Span Processor 对所有 span 生效,因此要谨慎使用,以避免影响性能和数据质量。如果只想让某些 span 带上 attribute,可以在创建 span 时手动设置。

特点 Trace 下的所有 span

如果只想在一个特定的 trace 的所有 span 中加上某个 attribute,可以使用 OpenTelemetry SDK 提供的 Span Processor,并且在创建 Span Processor 时指定一个 filter 函数,该函数可以根据 span 的 trace ID 或其他属性来判断是否需要对该 span 添加指定的 attribute。

下面是一个示例代码,展示了如何使用 Span Processor 和 filter 函数来只在特定 trace 的所有 span 中添加指定的 attribute:

go 复制代码
package main

import (
	"context"

	"go.opentelemetry.io/otel"
	"go.opentelemetry.io/otel/attribute"
	"go.opentelemetry.io/otel/exporters/stdout"
	sdktrace "go.opentelemetry.io/otel/sdk/trace"
)

func main() {
	// 创建一个 stdout exporter,将 span 输出到控制台
	exporter, err := stdout.NewExporter(stdout.WithPrettyPrint())
	if err != nil {
		panic(err)
	}

	// 创建一个 trace provider,使用 stdout exporter 输出 span
	provider := sdktrace.NewTracerProvider(sdktrace.WithBatcher(exporter))

	// 设置全局 trace provider
	otel.SetTracerProvider(provider)

	// 创建一个 span processor,将指定的 attribute 添加到指定 trace 下的所有 span 中
	processor := sdktrace.NewSimpleSpanProcessor(func(span sdktrace.ReadOnlySpan) {
		// 判断当前 span 是否属于指定的 trace
		if span.SpanContext().TraceID().String() == "my_trace_id" {
			// 如果是,将指定的 attribute 添加到该 span 上
			span.SetAttributes(attribute.String("my_attribute", "my_value"))
		}
	})

	// 将 span processor 添加到 trace provider 中
	provider.RegisterSpanProcessor(processor)

	// 创建一个新的 trace 和 span
	tracer := otel.Tracer("example")
	ctx, span := tracer.Start(context.Background(), "my_span")
	defer span.End()

	// 在 span 上设置其他 attribute
	span.SetAttributes(attribute.String("another_attribute", "another_value"))

	// 执行其他操作...
}

在上面的示例代码中,使用 sdktrace.NewSimpleSpanProcessor 创建了一个简单的 Span Processor,该处理器会调用指定的函数,并将当前 span 作为参数传递给该函数。在该函数中,可以使用 span.SpanContext().TraceID().String() 方法获取当前 span 的 trace ID,并根据需要判断是否需要对该 span 添加指定的 attribute。然后,将该 Span Processor 添加到 trace provider 中,即可让指定 trace 的所有 span 都带上该 attribute。

子 Span 继承父 Span 的属性

当一个 span 手动添加了属性后,它的子 span 并不会自动继承这些属性。但是,可以通过 OpenTelemetry SDK 提供的 Tracer.Start 方法的第二个参数来指定一个 trace.WithAttributes 选项,该选项可以让子 span 继承父 span 的属性。

下面是一个示例代码,展示了如何让子 span 集成父 span 的属性:

go 复制代码
package main

import (
	"context"

	"go.opentelemetry.io/otel"
	"go.opentelemetry.io/otel/attribute"
	"go.opentelemetry.io/otel/exporters/stdout"
	sdktrace "go.opentelemetry.io/otel/sdk/trace"
)

func main() {
	// 创建一个 stdout exporter,将 span 输出到控制台
	exporter, err := stdout.NewExporter(stdout.WithPrettyPrint())
	if err != nil {
		panic(err)
	}

	// 创建一个 trace provider,使用 stdout exporter 输出 span
	provider := sdktrace.NewTracerProvider(sdktrace.WithBatcher(exporter))

	// 设置全局 trace provider
	otel.SetTracerProvider(provider)

	// 创建一个新的 span
	tracer := otel.Tracer("example")
	ctx, parentSpan := tracer.Start(context.Background(), "parent_span",
		otel.WithAttributes(attribute.String("parent_attribute", "parent_value")),
	)
	defer parentSpan.End()

	// 创建一个子 span,并让其继承父 span 的属性
	ctx, childSpan := tracer.Start(ctx, "child_span",
		otel.WithAttributes(parentSpan.Attributes()...),
	)
	defer childSpan.End()

	// 在子 span 上设置其他属性
	childSpan.SetAttributes(attribute.String("child_attribute", "child_value"))

	// 执行其他操作...
}

在上面的示例代码中,首先在父 span 上设置了一个属性,然后在创建子 span 时,使用 trace.WithAttributes(span.Attributes()...) 选项将父 span 的属性传递给子 span,这样子 span 就可以继承父 span 的属性了。在子 span 上也可以继续添加其他属性。

如果当前的代码块是在一个 span 中执行的,那么可以使用 trace.SpanFromContext(ctx) 获取当前 span,然后将其作为父 span。

结合项目

  1. 由于 backend_id 是有 venus 产生,可以由 venus 服务在 trace 中设置属性

  2. 目前 profile 消费的4个阶段,只有在第一个阶段UnpackKafkaMessage,才能解析到 backend_id,而初始化Tracer的代码位于全局,且经组员反馈在 SigNoz Web 的 Trace 无法观测到该属性

    go 复制代码
    consumerTracer = otel.Tracer("profile-consumer",
    		trace.WithInstrumentationAttributes(attribute.String("profile.work", "consumer")))

    trace.WithInstrumentationAttributesspan.SetAttributes 都是用于添加属性(attribute)到 span 中的方法,但它们的作用和使用方式略有不同。

    trace.WithInstrumentationAttributes 是用于在创建 Tracer 时添加一些与仪表化相关的属性,这些属性会自动添加到由该 Tracer 创建的所有 span 中。它通常用于标识当前 Tracer 所使用的仪表化代码库、版本号、语言等信息。

    span.SetAttributes 则是用于在创建 span 后手动添加属性,这些属性通常用于标识该 span 所对应的操作、请求、响应等信息。它可以在任何时候添加,可以添加多个属性,也可以添加自定义的属性。

总上考虑,暂时使用 在第一个阶段 UnpackKafkaMessage 的 Span 手动添加属性后,它的子 Span 去继承 父 Span 的属性

问题:

Span 没有 Attributes(),只有 ReadOnlySpan有 Attributes()

明日待办

  • 组会讨论
    • 移除关于 Prometheus 的相关配置
    • 。。。

导师建议:让服务自己监控自己CPU、内存等指标然后上报是否合适。

我建议调研一下:

  1. 参考uptrace看看他们怎么做服务cpu、内存监控的
  2. 调研下独立服务监控指标,比如hostmetricsreceiver
相关推荐
数字供应链安全产品选型1 小时前
悬镜安全打造“中国版 Anthropic Mythos”:以AI治理AI,重构新一代数字供应链安全
人工智能·安全·重构
Ai拆代码的曹操2 小时前
MySQL GROUP BY 性能优化:执行计划分析 + 索引重构实战
mysql·性能优化·重构
小满zs6 小时前
Go语言第五章(数组和切片)
后端·go
云和恩墨6 小时前
从静态备份到极速恢复:zData S重构多元数据库时代的“第二存储”底座
数据库·重构
AI大模型-小华8 小时前
ChatGPT充值后Codex越优化接口越慢?用性能基线避免无效重构
chatgpt·重构·codex·chatgpt plus·chatgpt pro·chatgpt充值
AI科技星8 小时前
全域光速运动理论体系 (GAQ-UFT)——范式重构、核心方程与传统物理的本质分野
人工智能·线性代数·机器学习·重构·数据挖掘·回归·ai科技星
2601_954706499 小时前
云端算力重构移动生态:云手机技术架构解析与 Python 自动化实战
智能手机·重构·架构
chenzhou__9 小时前
独立游戏开发日志 ①:从信号博弈到涂色对战——一次玩法重构始
笔记·后端·学习·unity·go·独立游戏
名字还没想好☜1 天前
Go 用 bufio.Scanner 读大文件踩坑:默认 64KB 行上限、Buffer 扩容与按 Token 切分
开发语言·后端·golang·go