Amazon云计算AWS之[6]简单队列服务SQS

简单队列服务SQS

简单队列服务SQS

  • 简单队列服务(Simple Queue Service,SQS)是Amazon为解决其云计算平台之间不同组件的通信而专门设计开发的。

SQS基本组成

  • SQS由三个基本部分组成:系统组件(Component)、队列(Queue)和消息(Message)。、
  • 消息和队列是最重要的两个概念。

系统组件

  • 系统组件是SQS的服务对象。组件既是消息的发送者,也是消息的接收者。
  • SQS则是组件之间沟通的桥梁

队列

  • 队列是存放消息的容器 ,类似 S 3 S3 S3中的桶。
  • 队列的数目任意,创建队列时用户必须给其指定一个在SQS账户内唯一的名称。当需要定位某个队列时采用URL的方式进行访问,URL是系统自动给创建的队列分配的。
  • 队列在传递消息时会尽可能实现"先进先出",但无法保证先进入的消息一定会最先被投递给指定的接收者。

消息

  • 消息是发送者创建的具有一定格式的文本数据接收对象可以是一个或多个组件
  • 消息的大小有限制,但数量不做限制
  • SQS允许用户在消息中添加有关的序列数据,对于数据发送顺序要求比较高的用户可以在发送消息之前向其中加入相关信息。

SQS的消息

消息格式

  • 消息ID(Message ID):由系统返回给用户,用来标识队列中的不同消息
  • 接收句柄(Receipt Handle):当从队列中接收消息时会从消息处获得接收句柄,该句柄可以用来对消息进行删除等操作。
  • 消息体(Body):消息的正文部分,需要注意的是消息存放的是文本数据并且不能是URL编码方式。
  • 消息体MD5摘要(MD5 of Body):消息体字符串的MD5校验和。

消息取样

  • 队列中的消息是冗余存储 的,同一个消息会存放在系统的多个服务器上。其目的是为了保证系统的高可用性,但会给用户查询队列中的消息带来麻烦。

  • 为解决该问题,SQS采用基于加权随机分布(Weighted Random Distribution)的消息取样 。当用户发出查询队列中消息的命令后,系统在所有的服务器上使用基于加权随机分布算法随机地选出部分服务器 ,然后返回这些服务器上查询到的队列消息副本。

  • 当消息数量较少时,SQS进行消息取样时可能会出现返回结果不准确的现象

  • 但由于消息采样具有随机性,只要用户一直查询下去,总会查询到所有的消息。

消息可见性超时值和生命周期

  • 在SQS中,消息是否被接受是由用户确认的。当用户执行删除操作后,系统会认为用户已接收到消息,将队列中的消息彻底删除。如果用户未接收到数据或接收到数据未被执行删除操作,SQS将在队列中保留该消息。
  • 为保证其他组件不会看见用户的消息,SQS会将该消息阻塞,相当于给消息加锁。但是锁并不会一直锁住消息,因为系统保留消息的目的是给用户重传数据。为此SQS引入一个可见性超时值(Visibility Timeout)。
  • 可见性:表示该消息可以被所有的组件查看。可见性超时值相当于一个计时器。在设定好的时间内,发给用户的消息对于其他所有的组件是不可见的。如果在计时器到时之前用户一直未执行删除操作,则SQS会将该消息的状态变成可见并给用户重传这个消息。
  • 扩展操作:将计时器按照新设定的值重新计时,终止就是将当前的计时过程终止,直接将消息由不可见变为可见。
相关推荐
九河云13 分钟前
物联网赋能玻璃制造业:实现设备智能管理与生产协同
科技·物联网·重构·云计算·制造
24k小善1 小时前
Flink TaskManager详解
java·大数据·flink·云计算
Johny_Zhao2 小时前
MySQL 高可用集群搭建部署
linux·人工智能·mysql·信息安全·云计算·shell·yum源·系统运维·itsm
知识分享3 小时前
虚拟化技术的起源与发展历程
云计算
小奕同学A6 小时前
数字化技术的五个环节:大数据、云计算、人工智能、区块链、移动互联网
大数据·人工智能·云计算
24k小善18 小时前
FlinkUDF用户自定义函数深度剖析
java·大数据·spring·flink·云计算
云边有个稻草人1 天前
【金仓数据库征文】从云计算到区块链:金仓数据库的颠覆性创新之路
数据库·云计算·区块链·金仓数据库 2025 征文·数据库平替用金仓·金仓数据库概述·金仓数据库的产品优化提案
Linux运维老纪1 天前
Linux之七大难命令(The Seven Difficult Commands of Linux)
linux·运维·服务器·云计算·运维开发
猫头虎1 天前
浅谈国产数据库多租户方案:提升云计算与SaaS的资源管理效率
大数据·数据库·数据仓库·sql·云计算·时序数据库·kingbasees