观测云产品更新 | 优化日志数据转发、索引绑定、基础设施自定义等

观测云更新

日志

  • 数据转发:新增外部存储转发规则数据查询;支持启用/禁用转发规则;
  • 绑定索引:日志易新增标签绑定,从而实现更细颗粒度的数据范围查询授权能力。

基础设施 > 自定义

  • 【默认属性】这一概念更改为【必有属性】:上报的数据中必须包含该属性字段,否则将会上报失败;
  • 支持将自定义对象添加至二级菜单,便于查看;
  • 自定义查看器新增快捷筛选。

场景

  • 定时报告:新增【钉钉】【企业微信】【飞书】三种通知方式;
  • 图表:【时序图、饼图、柱状图、直方图、散点图、气泡图、表格图、矩形树图、漏斗图、排行榜、地图、蜂窝图】新增数据格式,可以定义【小数位数】以及【千分位分隔符】。

监控 > 通知对象管理

  • 邮件组类型下架,已创建的不受影响。

快照

  • 分享快照新增 IP 白名单访问限制。

异常追踪

  • 【等级】支持自定义创建;支持启用/禁用默认等级。

集成 > 扩展

  • DataFlux Func 托管版和 RUM Headless 现支持海外站点:俄勒冈,法兰克福,新加坡。

DataKit 更新

新加功能

  • 新增 Neo4j 采集器
  • RUM 采集器新增 sourcemap 文件上传、删除和校验接口,并移除 DCA 服务中 sourcemap 上传和删除接口
  • 新增 IBM Db2 采集器的监控视图和检测库

功能优化

  • 优化 Kubernetes 指标采集和对象采集的效率
  • 优化日志采集的 metrics 输出
  • Kubernetes Node 对象采集添加 unschedulable 和 node_ready 两个新字段
  • Oracle 采集器支持 Linux ARM64 架构
  • logstreaming 采集器增加集成测试
  • Datakit 开发文档中增加 IBM Db2 采集器内容
  • Kafka、MongoDB 采集器文档完善
  • MySQL 采集器监控帐号创建时,MySQL 8.0+ 默认采用 caching_sha2_password 加密方式
  • 优化 bug report 命令采集 syslog 文件过大问题

问题修复

  • 修复环境变量 ENV_GLOBAL_HOST_TAGS 中使用 __datakit_hostname 无法获取主机 hostname 的问题
  • 修复 host_processes 采集器指标数据缺少 open_files 字段
  • 修复 Pinpoint 采集器 resource 大量为空的情况和 Pinpoint 占用内存过高问题

Breaking Changes

  • 删除 DCA 服务中的 sourcemap 文件上传和删除接口,相关接口移至 RUM 采集器

集成更新

Huawei CCE

  • 观测云支持对 CCE 中各类资源的运行状态和服务能力进行监测,包括 Containers、Pods、Services、Deployments、Clusters、Nodes、Replica Sets、Jobs、Cron Jobs 等。您可以在 Kubernetes 中通过 DaemonSet 方式安装 `DataKit`,进而完成对 Kubernetes 资源的数据采集。最终,在观测云中实时监测 Kubernetes 各类资源的运行情况。

Huawei CSS(Elasticsearch)

  • 华为云搜索服务 CSS for Elasticsearch 的核心性能指标包括查询延迟、索引速度、搜索速度、磁盘使用率和 CPU 使用率,这些都是评估和优化 Elasticsearch 性能的关键指标。

Huawei SYS.AS

  • 华为 SYS.AS 的核心性能指标包括 CPU 利用率、内存使用率、磁盘I/O、网络吞吐量和系统负载等,这些都是评估和优化自动缩放系统性能的关键指标。

Huawei ASM

  • 华为云的 ASM 的链路追踪数据输出到观测云,进行查看、分析。

AWS CloudFront

  • AWS CloudFront 的核心性能指标包括请求总数、数据传输量、HTTP 错误率、缓存命中率和延迟,这些可以帮助用户评估和优化内容分发网络的性能。

AWS MediaConvert

  • AWS MediaConvert 包括数据传输、视频报错、作业数、填充等。

AWS Aurora Serverless V2

  • AWS Aurora Serverless V2,包括连接数、IOPS、队列、读写延迟、网络吞吐量等。

AWS Redshift

  • AWS Redshift 的核心性能指标包括查询性能、磁盘空间使用率、CPU 利用率、数据库连接数和磁盘 I/O 操作,这些都是评估和优化数据仓库性能的关键指标。

AWS Simple Queue Service

  • AWS Simple Queue Service 的展示指标包括队列中最旧的未删除消息的大约存在时间、延迟且无法立即读取的消息数量、处于空中状态的消息的数量、可从队列取回的消息数量等。

AWS Timestream

  • AWS Timestream 的展示指标包括系统错误数(内部服务错误数)、当前 AWS 区域和当前 AWS 帐户的无效请求的总和、成功请求经过的时间和样本数量、存储在内存中的数据量以及存储在磁存储器中的数据量等。

AWS Neptune Cluster

  • AWS Neptune Cluster 的展示指标包括冷启动时间、执行时间、并发执行数和内存使用量,这些指标反映了 Neptune Cluster函数的响应速度、可扩展性和资源利用情况。
相关推荐
誰能久伴不乏1 天前
【Qt 架构实战】从零手写工业级 Qt 日志系统:底层拦截与架构原理解析
qt·架构·日志
JaydenAI3 天前
[MAF预定义的IChatClient中间件-01]LoggingChatClient——在LLM调用前后输出日志
ai·c#·agent·日志·agent管道·chatclient中间件
fengxin_rou7 天前
【MySQL 三大日志深度解析】:redo log、undo log、binlog 作用与两阶段提交原理
数据库·mysql·日志·redo log
不吃土豆的马铃薯8 天前
Spdlog 入门:日志记录器与日志槽基础详解
服务器·开发语言·c++·c·日志·spdlog
佛祖让我来巡山11 天前
测试环境日志爆内存?我用一个工具类搞定了双日志体系的智能打印
日志·日志打印·生产测试环境日志
观测云16 天前
观测云日志转发至 Kafka 最佳实践
kafka·日志
代码漫谈18 天前
Spring Boot日志配置全攻略:打造高效、可靠的日志系统
java·spring boot·log4j·日志
Irene199120 天前
(课堂笔记)PL/SQL:异常处理、数据同步、日志
oracle·异常处理·日志·数据同步
庞轩px22 天前
第六篇:Redo Log与Binlog——崩溃恢复的底层保障
mysql·binlog·数据安全·innodb·日志·redo log·update
七夜zippoe23 天前
OpenClaw 日志记忆:memory/YYYY-MM-DD.md
memory·日志·记录·记忆·openclaw