腾讯mini项目-【指标监控服务重构】2023-08-20

今日已办

PPT制作

答辩流程

  1. 概述:对项目背景、架构进行介绍(体现我们分组的区别和需求)
  2. 人员:小组成员进行简短的自我介绍和在项目中的定位,分工
  3. 进展:对项目进展介绍,其中a、b两组的区别和工作中遇到的重难点由相应组员进行展开分析
  4. 展示:分组用视频或者图片进行短期成果展示
  5. 展望:项目后续的规划和期望的最终成果

分工及负责任务

  1. 作为b组小组的组长
    1. 负责整体项目进度的把控
    2. 项目需求的落地和小组成员的分工安排
    3. 定期与导师开展线上会议汇报项目进度和问题,同样也与另一个小组的组长协作沟通交流问题
  2. 同样在组内负责部分开发的任务
    1. 【SLI】包括 SLI 的设计和修改
    2. 【接入otel-sdk】部署 SigNoz-Collector 集成到项目的 compose 中
    3. 【接入otel-sdk】在 profile 模块中接入 otel-sdk 完成 trace 和 metric 的上报
    4. 使用 watermill-pubsub 框架替换为原有框架 baserunner

重难点

  • SLI

    • SRE(Site Reliability Engineering),边缘可靠性工程,监控性能、高可用性、可扩展性和安全性

    • SLI标准-百分比(cpu利用率)、SLO目标(延时200ms)、SLA协议

  • otel-trace

    • 【已完成】分布式跨进程跨服务的调用的 span 的上下文传播
    • span references
  • otel-metric

    • cpu、memory的方案
      • 程序主动上报 - 程序性能瓶颈无法去主动上报就无法收集到目标指标
      • docker stats receiver 来收集 docker container 的指标
      • hostmetric receiver 可指定进程
      • 云原生,后续整个服务以 k8s 的形式部署故放弃 docker stats 的方案,SigNoz有提供k8s下收集pod指标的官方方式【仍需后续调研】
  • watermill-pubsub

    1. 【已完成】publisher没有提供回调函数-修改源码嵌入 otel-trace&log 的逻辑
    2. 【尚未完成】watermill-kafka 底层依赖 sarama,需要自定义实现pub/sub替换为底层依赖 kafka-go

效果展示

Trace

Metric

Log

明日待办

  1. PPT 汇报
  2. 与导师开会
相关推荐
研究司马懿5 小时前
【云原生】Gateway API高级功能
云原生·go·gateway·k8s·gateway api
Coder_Boy_7 小时前
技术发展的核心规律是「加法打底,减法优化,重构平衡」
人工智能·spring boot·spring·重构
梦想很大很大18 小时前
使用 Go + Gin + Fx 构建工程化后端服务模板(gin-app 实践)
前端·后端·go
lekami_兰1 天前
MySQL 长事务:藏在业务里的性能 “隐形杀手”
数据库·mysql·go·长事务
却尘1 天前
一篇小白也能看懂的 Go 字符串拼接 & Builder & cap 全家桶
后端·go
ん贤1 天前
一次批量删除引发的死锁,最终我选择不加锁
数据库·安全·go·死锁
一枕眠秋雨>o<1 天前
算子即战略:CANN ops-nn 如何重构大模型推理的内存与计算边界
人工智能·重构
敲键盘的生活1 天前
MoneyPrinter重构之一:用nicegui调用大模型生成视频文案
python·重构·aigc·ai编程·ai写作
禁默2 天前
不仅是 FlashAttention:揭秘 CANN ops-transformer 如何重构大模型推理
深度学习·重构·aigc·transformer·cann
汇智信科2 天前
打破信息孤岛,重构企业效率:汇智信科企业信息系统一体化运营平台
数据库·重构