2018年亚马逊云科技推出基于Arm的定制芯片实例

2018年,亚马逊云技术推出了基于Arm的定制芯片。 据相关数据显示,基于Arm的性价比比基于x86的同类实例高出40%。 这打破了对 x86 的依赖,开创了架构的新时代,现在能够支持多种配置的密集计算任务。 这些举措为亚马逊云技术的其他创新奠定了基础,包括从训练到推理的机器学习和人工智能任务的优化。 自Nitro系统推出以来,EC2实例也迅速增加,EC2现在拥有超过475个实例。 计算方式也在不断更新,从EC2实例开始,逐渐支持容器和。 一般来说,云平台只提供托管服务。 亚马逊云技术提供EKS(托管服务)、ECS(自研)和三种容器管理工具。 它还开创了无服务器计算时代,这是一种按需提供后端服务的方法。 无服务器提供商允许用户编写和部署代码,而无需担心底层基础设施。

贮存

2006年,亚马逊云技术推出了S3()服务。 S3定义了对象存储,是对象存储事实上的标准,具有划时代的意义。

S3实际上比EC2早6个月推出。 最初设计时的一个重要原则就是"简单",所以当时只提供了 和 功能。 核心 API 只有四个 REST 命令(GET、PUT、LIST 和)。 在与亚马逊前技术副总裁 Tom 谈论 S3 的开发时,两人认为"'让它尽可能简单'是 S3 成功的关键之一。尽管这在当时颇受争议,可进化的架构一开始是不可能的。它被设计得很复杂。"

最初,用户主要使用S3来存储图像和视频数据,但随着时间的推移,越来越多的交易日志、文件、客户服务记录等数据被放入S3中​​。 那么用户想要的不仅仅是"弹性存储"和"低成本"。 他们还希望能够有数百个应用程序使用这些共享数据集,因此亚马逊添加了""功能。 这个过程足以说明S3的演进原理:用户想用自己的数据做什么,亚马逊云技术就会添加他们想要的任何功能或服务。 通过技术和商业服务,亚马逊云技术与用户建立了快速反馈循环,成为快速增长的飞轮。

2006年,S3只有8个服务(),到2019年,S3已经有262个。而且,亚马逊致力于让S3拥有更高的性能和更低的成本,推出了七种不同级别的存储产品:、、、、One-区域 、 、 深度 和 S3。 S3(智能分层)产品分为"频繁访问"和"不频繁访问"两个级别。 连续30天未访问的对象将自动移至"不常访问"层,降低操作复杂度。 2021年,智能分层也从2级增加到3级,并增加了新推出的存档即时访问层。 最经典的存储仍在不断发展。

S3存储本身具有计算与存储分离的特点。 在云原生时代,非常适合作为数据湖存储的核心。 企业可以基于S3构建数据湖,并使用原生Web服务来运行人工智能或机器学习服务(),从而更高效地处理各种结构化和非结构化数据。

S3 的耐用性被设计为"11 个 9"(99.%),这意味着如果您使用 S3 存储对象,则可以预期平均每 10,000 年就会发生一次对象丢失。 今年,亚马逊宣布S3中存储的对象数量已超过200万亿,每秒需要处理数千万个请求。 如今,S3已经发展成为一个庞大而健壮的分布式存储系统。 为了保持数据持久性,亚马逊去年年底宣布升级S3的存储后端系统,并引入"自动推理"方法来确保"崩溃一致性"。 ,即系统崩溃时数据仍能保持"11个9"的一致性状态。

实现相对复杂,包含超过 40,000 行 Rust 代码。 Soft 用于提供崩溃一致性。 传统验证方法的速度跟不上系统的开发迭代速度。 使用轻量级的形式化方法()来提高可靠性,自动生成一系列操作来调用键值存储系统的接口,同时检查参考模型与具体实现之间的行为和状态是否相符。操作过程中保持一致。 基于上述方法,亚马逊成功发现并修复了16个涉及崩溃一致性和并发错误的重要问题。 亚马逊云技术也在SOSP会议上发表了相关论文,并获得了最佳论文奖。

网络

网络是云计算业务最基本的支撑之一。 亚马逊云技术拥有全球最大的骨干网络,拥有25个区域、81个可用区、14个本地区域、17个区域、300多个边缘站点和108个专线接入点。 它们是在2006年基于单一扁平子网的基础上经过16年的不断创新和优化而开发出来的。

在全球化浪潮下,许多大型跨国公司都会在全球设立多个站点。 在构建全球网络时,亚马逊云技术用户可以使用VPC创建多个虚拟网络。 传统的做法是使用VPC功能连接区域内或跨区域的VPC,并使用VPN或VPN将非亚马逊云技术基础设施与亚马逊云技术互连。 但如果云上的负载增加,管理工作就会成倍增加。 这时可以采用集中管理链路的方案。 亚马逊于 2018 年推出了 Re:。使用 Re:,可以显着简化管理并降低运营成本,因为每个网络只需要连接到其他网络,而不需要连接到所有其他网络。

当网络遍布全球并需要多种技术时,构建、管理和监控网络的复杂性就会显着增加。 在 2021 年 re: 大会上,亚马逊云技术宣布推出 Cloud WAN 全球网络托管服务。 借助这项网络服务,企业可以利用亚马逊的骨干网络,通过Cloud WAN图形界面一键创建自己的全球网络,设置中转网关或云连接,并监控网络运行状态、安全性和性能。

来源: 在 2021 年 re: 大会的主题演讲和博文中,还提到了亚马逊的"云(the cloud)"愿景,即通过有针对性的硬件和解决方案,带来亚马逊云技术推向新地区。

在博客中写道:"我们将在2022年见证一场转变:云将在边缘变得高度专业化。我们将为边缘提供量身定制的解决方案,无论是车间、餐厅、小型零售店还是远程位置所有地区都可以充分发挥云的优势。"

安全

没有安全的保证,云的所有优势都无从谈起。 随着数以百万计的组织上云,数据和流量更加集中,云已经成为安全攻防的主战场。 作为云计算领域的先行者,亚马逊首创的"共享安全责任模型"已经成为云安全联盟大家认可的事实上的行业标准。 该模型明确了云厂商和租户的安全边界,也明确了云厂商内部的安全边界。 安全责任。 今年,亚马逊云技术再次提出五层"洋葱防护方法论":威胁检测与事件响应、身份认证与访问控制、网络与基础设施安全、数据保护与隐私、风险管理与合规。 基于280多项安全合规服务和功能,亚马逊云技术利用这一五层防护体系为客户提供全方位的安全服务。

可持续发展

2015年,联合国制定了全球框架《巴黎协定》。随后,各缔约国制定了"碳中和"路径和目标,为全球环境的健康发展做出了承诺。 埃森哲分析表明,如果采用绿色方式迁移到公有云,全球每年可减少二氧化碳排放5900万吨,相当于动动手指就能减少2200万辆汽车的碳排放!

作为世界级科技巨头,亚马逊引领了"绿色云"的转型。 亚马逊表示将提前十年达成《巴黎协定》,并在2025年实现100%可再生能源,并且还设计了一套从基础设施到软件设计的前瞻性解决方案。 这些举措也取得了显著成效。 2021年,亚马逊云技术可持续发展架构副总裁表示:亚马逊云技术的基础设施能源效率比普通美国企业数据中心高3.6倍。 同时,亚马逊在执行相同任务时可以减少 88% 的碳足迹。

3、重构云基础:为客户创新、为未来创新

16年前诞生的亚马逊云技术,开创了云计算的新领域。 亚马逊的创新可以说对IT行业的演变产生了革命性的影响。

尽管当今云厂商竞争激烈,但亚马逊云技术始终处于市场领先地位。 相关数据显示,亚马逊云技术在云基础设施服务商中份额最大,占比33%,其客户已经突破百万。 无论是科技巨头、银行还是政府,不同的组织都在使用Web来开发和部署自己的应用程序。

典型的早期用户包括那些于 2009 年开始采用 Web 并于 2015 年中期关闭最后一个数据中心的用户。 纳斯达克自2014年以来一直使用Web在云中存储股票交易数据。今年它再次增加了边缘解决方案的使用,并将逐步开始迁移到亚马逊云服务。 NASA 从 2000 年开始使用 Web 服务提供照片、视频和音频的在线访问。上周,NASA 再次宣布将使用亚马逊云服务为空间站构建"太空物流"基础设施系统......

这样的成绩得益于亚马逊围绕客户业务不断进行技术创新。 有业内专家认为,亚马逊云技术的一大亮点就是能够对用户当前面临的问题非常敏感,并快速提供解决方案或产品。 这也正如 Dave Brown 所说:"我们可以应对几乎任何需求和挑战,并且永远不会对客户说不。在亚马逊云技术,我们拥有'客户至上'的文化,不仅满足他们当前的需求,而且还将预测他们未来的需求。" 以客户为中心、不断创新也是"Day one"理念的体现。

在面向未来的发展过程中,亚马逊云技术在过去16年里无疑有很多技术理念和决策经验值得学习和思考。

2022年4月20日,亚马逊云技术将在线举办创新大会。 这也是亚马逊首次专门关注云基础设施的技术会议。 它将设置6大分会场和30+前沿技术主题,将更全面、更详细地分享亚马逊。 云技术底层创新,诠释不同业务场景的应用,助您打造数据驱动型企业!

参考链接:

/2020/09/--with-硝基.html

/2021/10/using----to.html

/观看?v=

/2016/03/a--of-/

./aws--s3/

/doi//10.1145/。

/2021/12/tech--for-2022-and-.html

/cn/blogs//-aws--space-----reef/

相关推荐
运维小文7 天前
ceph的集群管理
ceph·对象存储·存储·ceph集群管理·ceph节点管理
命里有定数11 天前
windows工具 -- 使用SpaceSniffer查看哪些文件夹占用那么大空间, 再也不用右键属性了
windows·存储·硬盘·c盘
Ciderw12 天前
多处理器一致协议(MSI)协议详细介绍
缓存·存储·一致性·msi
Ciderw14 天前
块存储、文件存储和对象存储详细介绍
网络·数据库·nvme·对象存储·存储·块存储·文件存储
我叫于豆豆吖16 天前
了解云计算工作负载保护的重要性及必要性
负载··保护
栀夏61319 天前
Ceph 学习指南 集群部署【 cephadm 】
中间件·存储
u01093626525 天前
Linux系统块存储子系统分析记录
linux·存储·1024程序员节·块i/o
云中小筑1 个月前
SD2.0 Specification之命令(Commands)
sd·存储·sd协议·嵌入式存储·sd命令·sd介绍
向宇it1 个月前
【unity框架开发12】从零手搓unity存档存储数据持久化系统,实现对存档的创建,获取,保存,加载,删除,缓存,加密,支持多存档
开发语言·unity·缓存·游戏引擎·持久化·存储·存档
小南家的青蛙1 个月前
ElasticSearch之集群中的节点
elasticsearch·存储