aws中opensearch 日志通(Centralized Logging with OpenSearch)2.0(一)

aws日志通2.0

实现全面的日志管理和分析功能

  • 一体化日志摄取 :把aws服务器日志和应用日志传输到opensearch域中
  • 无代码日志处理 :在网页控制台中就可以实现数据处理
  • 开箱即用 :提供可视化模版(nginx、HTTP server )
    架构图

    核心
  • 为lambda 管理日志管道或日志代理的核心逻辑
  • aws step functions 按需协调cfn创建日志管道资源,用于收集和处理日志
  • aws systems manager 和 amazon eventbridge 用于管理从应用服务器收集日志代理
  • ec2 和eks :安装flunt bit 代理,将日志数据上传到应用日志管道
    注意
  • KDS(kkinesis data streams) (传输数据) 可简化任何规模的数据流捕获、处理和存储。
  • 目前中国区仅支持openid connect 认证
相关推荐
ZhangJun953 小时前
Linux常用命令笔记,中高级运维高频指令,并附上vim常见操作
linux·运维·centos·云计算·vim
逐流人3 小时前
Ceph对象存储与文件系统存储管理:从RADOS网关、S3与Swift到CephFS快照同步
linux·运维·ceph·云原生·云计算·swift·rados
johnny2333 小时前
AWS系列之官方CLI、AWS Local:简介、实战
aws
杨超越luckly3 小时前
上海社零数据:消费结构分化——1.66万亿盘子从+7.2%到-1.0%的十五年观察
html·agent·数据可视化·上海·社会消费品零售总额
灰山君4 小时前
面向高校实训室的数字孪生可视化平台:支持校内部署与200个教学席位
大数据·人工智能·信息可视化·数据可视化·实时大数据
逐流人16 小时前
Ceph分布式存储集群配置与池管理:从配置优先级到PG、复本池与纠删码池
运维·分布式·ceph·云原生·云计算·rados
jqpwxt1 天前
启点创新科技景区私有化票务管理系统:智慧景区数字化建设核心服务商,以本地部署筑牢景区数字化安全与稳定底座
大数据·人工智能·科技·云计算·旅游
ZhangJun951 天前
三次握手、四次挥手的具体细节和流程详解,附加思考题
tcp/ip·计算机网络·云计算
FIT2CLOUD飞致云1 天前
电子表格支持嵌入集成,支持GaussDB数据源与StarRocks计算引擎,DataEase开源BI工具v3.1.0版本发布
开源·数据可视化·dataease·数据表格·bi
腾讯云大数据1 天前
腾讯云数据智能体TCDataAgent升级:大数据平台不只“给人用”,也要“给Agent用”
大数据·云计算·腾讯云