Go 标准库想增加 metrics 指标,你支持吗?

大家好,我是煎鱼。

在 Go 的标准库中,有一个神奇的标准库 runtime/metrics,这个标准库提供了一系列预定义好的 Go 自身的相关指标。

如果没有编写过基础监控库或者关注的比较少的朋友可能会没接触到这类指标。

今天这篇文章是展开现有的 metrics 指标,并结合现有的社区讨论一起看看还有没有必要增加更多的标准库指标。

快速了解 runtime/metrics

以下是一个快速 Demo。代码如下:

go 复制代码
func main() {
	descs := metrics.All()
	samples := make([]metrics.Sample, len(descs))
	for i := range samples {
		samples[i].Name = descs[i].Name
	}

	metrics.Read(samples)

	for _, sample := range samples {
		name, value := sample.Name, sample.Value

		switch value.Kind() {
		case metrics.KindUint64:
			fmt.Printf("%s: %d\n", name, value.Uint64())
		case metrics.KindFloat64:
			fmt.Printf("%s: %f\n", name, value.Float64())
		case metrics.KindFloat64Histogram:
			fmt.Printf("%s: %f\n", name, medianBucket(value.Float64Histogram()))
		 ...
		}
	}
}

func medianBucket(h *metrics.Float64Histogram) float64 {
	total := uint64(0)
	for _, count := range h.Counts {
		total += count
	}
	thresh := total / 2
	total = 0
	for i, count := range h.Counts {
		total += count
		if total >= thresh {
			return h.Buckets[i]
		}
	}
	panic("should not happen")
}

输出结果:

bash 复制代码
/cgo/go-to-c-calls:calls: 0
/cpu/classes/gc/mark/assist:cpu-seconds: 0.000000
/cpu/classes/gc/mark/dedicated:cpu-seconds: 0.000000
...
/gc/cycles/automatic:gc-cycles: 0
/gc/cycles/forced:gc-cycles: 0
/gc/cycles/total:gc-cycles: 0
/gc/gogc:percent: 100
/gc/gomemlimit:bytes: 9223372036854775807
/gc/heap/allocs-by-size:bytes: 8193.000000
/gc/heap/allocs:bytes: 56832
/gc/heap/allocs:objects: 6
/gc/heap/frees-by-size:bytes: 1.000000
/gc/heap/frees:bytes: 0
/gc/heap/frees:objects: 0
/gc/heap/goal:bytes: 4194304
...

里面包含了相当多的 Go 系统指标。完整的代码运行和输出可以查看 https://go.dev/play/p/CKASbysqX9x

我梳理了一张对照清单。其中 10 个指标如下:

序号 指标 含义
1 /cgo/go-to-c-calls:calls 当前进程从 Go 调用到 C 的次数
2 /cpu/classes/gc/mark/assist:cpu-seconds 预计执行 GC 程序所花费的 CPU 总时长,以协助 GC 并防止其落后于应用程序
3 /cpu/classes/gc/mark/dedicated:cpu-seconds 在专门用于执行 GC 任务的 CPU 处理器(根据 GOMAXPROCS 的定义)上执行 GC 任务预计需要花费的 CPU 总时长
4 /cpu/classes/gc/mark/idle:cpu-seconds 在空闲 CPU 资源上执行 GC 任务所花费的 CPU 总时间
5 /cpu/classes/gc/pause:cpu-seconds GC 暂停应用程序预计所花费的 CPU 总时长
6 /gc/cycles/automatic:gc-cycles Go Runtime 程序已完成的 GC 循环次数。
7 /gc/gogc:percent 用户配置的堆大小目标百分比
8 /gc/heap/allocs:objects 应用程序触发的堆分配累计计数
9 /memory/classes/heap/free:bytes Go Runtime 对物理内存的可用空间大小的预估(完全空闲并可返回底层系统但尚未返回的内存)
10 /sched/gomaxprocs:threads 当前 runtime.GOMAXPROCS 的值,或是可以同时执行用户级 Go 代码的操作系统线程数。

对于完整指标有兴趣的可以查看:https://pkg.go.dev/runtime/metrics#hdr-Supported_metrics

更多的 metrics 指标

最近在 Go 社区中有同学发起了一项讨论《metrics for the standard library》,希望探讨和在其他标准库中添加更多的 metrics 指标,提供更多的可观察性。

比较多同学期望的是网络、延迟类的指标,针对性能、错误等。如下几种场景:

  • net/http 服务端:
    • 处理延迟。
    • 请求/响应体大小。
    • 恐慌(panic)、恢复(recover)。
    • 错误/警告(触发 net/http.Server.ErrorLog 的所有内容)
    • 被拒绝的无效请求。
  • net/http 客户端:
    • 调用延迟。
    • 请求/响应体大小
    • 连接池相关。
  • database/sql 客户端:
    • 查询延迟。
    • 响应大小。
    • 连接池相关。
  • net 网络包相关:
    • 例如 TCP、UDP 等,对应的打开连接的数量、连接状态(空闲、激活、关闭)、连接错误等。
    • 例如 TLS,在握手阶段相关的指标,握手持续时间、握手失败计数等。

总结

整体上会发现大家对于 Go 标准库的指标诉求,更多的趋向于底层包。因为无论你用的是什么开源仓库,其绝大部分都是基于上述提到的包。

在现阶段,如果自己的 Go 业务应用程序去记录这些指标,就需要再封装一层,每一个包,例如:ORM 就需要去实现一遍插件等。

而第三方库实现不会把 metrics 这类非核心功能直接加入初始化实现中。因此官方标准库对 metrics 的支持是非常有必要的。

至少这样就不用每个团队都搞一遍 net/http、database/sql 等的延迟调用指标的配置和设置了。

文章持续更新,可以微信搜【脑子进煎鱼了】阅读,本文 GitHub github.com/eddycjy/blo... 已收录,学习 Go 语言可以看 Go 学习地图和路线,欢迎 Star 催更。

Go 图书系列

推荐阅读

相关推荐
王中阳Go7 小时前
面试完第一反应是想笑
后端·go
Code季风10 小时前
gRPC与Protobuf集成详解—从服务定义到跨语言通信(含Go和Java示例)
go·grpc·protobuf
Code季风11 小时前
Protobuf 高级特性详解
go·protobuf
_代号00711 小时前
Go 编译报错排查:vendor/golang.org/x/crypto/cryptobyte/asn1 no Go source files
后端·go
岁忧18 小时前
(LeetCode 面试经典 150 题 ) 11. 盛最多水的容器 (贪心+双指针)
java·c++·算法·leetcode·面试·go
Nejosi_念旧19 小时前
解读 Go 中的 constraints包
后端·golang·go
漫步向前1 天前
gin问题知识点汇总
go
mao毛1 天前
go Mutex 深入理解
go·源码阅读
钩子波比1 天前
🚀 Asynq 学习文档
redis·消息队列·go
漫步向前1 天前
beegoMVC问题知识点汇总
go