云原生最佳实践系列 1:如何快速实现kafka性能压测

消息队列 Kafka 版实例类型的性能表现除了跟实例本身的规格相关外,与创建实例时选择的云盘类型也强相关,本实验通过相同规格的实例,不同的云盘类型来验证该因素的影响。

消息队列 Kafka Serverless 版本身实例未提供具体的云盘类型来选择,其性能表现只与购买实例时预留的写入、读取的指标有关, 写入峰值为预留写入的 2 倍,读取峰值为读取预留的 2 倍。

应用场景

借助 CADT 迅速的搭建 Kafka 不同类型的实例,并构建压测环境,快速对不同的实例配置的性能进行压测,以验证不同配置对性能影响,帮助客户快速的做出具体规格的选型。

主要步骤:

  1. 通过 CADT 快速完成压测服务端环境部署,以及压测客户端的初始化

  2. 配置压测变量,并完成压测

  3. 压测结束释放环境

部署架构

架构说明

一台 ECS,挂载 EIP 以便于登录和拉取压测客户端的软件。本实验中压测软件采用 Kafka 官方提供的压测软件。

3 个 Kafka 实例:

产品介绍

专有网络 VPC(Virtual Private Cloud) :是用户基于阿里云创建的自定义私有网络, 不同的专有网络之间二层逻辑隔离,用户可以在自己创建的专有网络内创建和管理云产品实例,比如 ECS、负载均衡、RDS 等。

云速搭 CADT(Cloud Architect Design Tools) :是一款为上云应用提供自助式云架构管理的产品,显著地降低应用云上管理的难度和时间成本。本产品提供丰富的预制应用架构模板,同时也支持自助拖拽方式定义应用云上架构;支持较多阿里云服务的配置和管理。用户可以方便的对云上架构方案的成本、部署、运维、回收进行全生命周期的管理。

弹性公网 IP:弹性公网 IP 是独立的公网 IP 资源,可与阿里云专有网络 VPC 类型的云服务器 ECS、NAT 网关、ENI 网卡、私网负载均衡 SLB 绑定,并可以动态解绑满足灵活管理的要求。弹性公网 IP 可为您在云上部署的网站提供 Internet 访问服务。

消息队列 Kafka 版,云托管的 Kafka 服务。实例版本(创建时指定规格)可以提供与开源 Kafka 完全兼容的接口和能力。

消息队列 Kafka Serverless 云托管的 Kafka 服务 Serverless 版本(按照预留量+实际流量进行计费)。

前置条件

在进行操作之前,您需要完成以下准备工作:

1)注册阿里云账号,并完成实名认证。您可以登录阿里云控制台,并前往实名认证页面 account.console.aliyun.com/v2/#/authc/... 查看是否完成实名认证。

2)购买按量付费资源,阿里云账户余额需要大于 100 元。考虑到部署后每小时会产生费用,建议账号内余额或者代金卷金额大于 200 元。您可以登录阿里云控制台,前往账户总览页面 usercenter2.aliyun.com/home) 查看账户余额。

操作步骤

  1. 基础环境搭建

  2. 配置压测环境并压测

2.1. 打开部署好的应用获取 Kafka 的 endpoint

2.2. 登录 ECS 初始化客户端环境并压测

  1. 一键释放资源

最佳实践全部内容,请点击此处查看。对方案和产品感兴趣的朋友,可以加入钉钉群交流(群号:31852400)。

相关推荐
VortMall1 小时前
全维度打磨细节体验,赋能商城稳定有序运营|VortMall 微服务商城 v1.3.11 版本发布
java·微服务·云原生·架构·商城系统·开源商城·vortmall
MicrosoftReactor1 小时前
技术速递|智能体测试智能体:基于 Foundry Hosted Agents 构建云原生 Skill-Eval Harness
ai·云原生·agent·ai-agent·skill
阿标在干嘛10 小时前
从物理机到K8s:政策快报平台的容器化部署实践
云原生·容器·kubernetes
张青贤11 小时前
Centos7离线部署K8s集群V1.28.8
云原生·容器·kubernetes·containerd·kubekey·离线部署
阿里云云原生13 小时前
2026 GOAI 世界人工智能开源大赛「Agent Infra 新智基座」赛道正式启动
云原生
AI人工智能+电脑小能手16 小时前
【大白话说Java面试题 第190题】【08_Kafka篇】第6题:消息队列有什么作用?
java·kafka·消息队列·系统设计·分布式架构
探索云原生18 小时前
Kubernetes 官方出品:一个 Controller 搞定 Job 排队和资源配额
ai·云原生·kubernetes·scheduler
风中凌乱21 小时前
kafka新版本集群的安装与部署
分布式·kafka
spider_xcxc21 小时前
Docker 实战:容器化多服务应用,Dockerfile 与 Compose 配置全解析
docker·云原生·eureka·虚拟化·容器化
hay_lee1 天前
Kubernetes StatefulSet:OrderedReady 极简指南
云原生·容器·kubernetes