2018年亚马逊云科技推出基于Arm的定制芯片实例

2018年,亚马逊云技术推出了基于Arm的定制芯片。 据相关数据显示,基于Arm的性价比比基于x86的同类实例高出40%。 这打破了对 x86 的依赖,开创了架构的新时代,现在能够支持多种配置的密集计算任务。 这些举措为亚马逊云技术的其他创新奠定了基础,包括从训练到推理的机器学习和人工智能任务的优化。 自Nitro系统推出以来,EC2实例也迅速增加,EC2现在拥有超过475个实例。 计算方式也在不断更新,从EC2实例开始,逐渐支持容器和。 一般来说,云平台只提供托管服务。 亚马逊云技术提供EKS(托管服务)、ECS(自研)和三种容器管理工具。 它还开创了无服务器计算时代,这是一种按需提供后端服务的方法。 无服务器提供商允许用户编写和部署代码,而无需担心底层基础设施。

贮存

2006年,亚马逊云技术推出了S3()服务。 S3定义了对象存储,是对象存储事实上的标准,具有划时代的意义。

S3实际上比EC2早6个月推出。 最初设计时的一个重要原则就是"简单",所以当时只提供了 和 功能。 核心 API 只有四个 REST 命令(GET、PUT、LIST 和)。 在与亚马逊前技术副总裁 Tom 谈论 S3 的开发时,两人认为"'让它尽可能简单'是 S3 成功的关键之一。尽管这在当时颇受争议,可进化的架构一开始是不可能的。它被设计得很复杂。"

最初,用户主要使用S3来存储图像和视频数据,但随着时间的推移,越来越多的交易日志、文件、客户服务记录等数据被放入S3中​​。 那么用户想要的不仅仅是"弹性存储"和"低成本"。 他们还希望能够有数百个应用程序使用这些共享数据集,因此亚马逊添加了""功能。 这个过程足以说明S3的演进原理:用户想用自己的数据做什么,亚马逊云技术就会添加他们想要的任何功能或服务。 通过技术和商业服务,亚马逊云技术与用户建立了快速反馈循环,成为快速增长的飞轮。

2006年,S3只有8个服务(),到2019年,S3已经有262个。而且,亚马逊致力于让S3拥有更高的性能和更低的成本,推出了七种不同级别的存储产品:、、、、One-区域 、 、 深度 和 S3。 S3(智能分层)产品分为"频繁访问"和"不频繁访问"两个级别。 连续30天未访问的对象将自动移至"不常访问"层,降低操作复杂度。 2021年,智能分层也从2级增加到3级,并增加了新推出的存档即时访问层。 最经典的存储仍在不断发展。

S3存储本身具有计算与存储分离的特点。 在云原生时代,非常适合作为数据湖存储的核心。 企业可以基于S3构建数据湖,并使用原生Web服务来运行人工智能或机器学习服务(),从而更高效地处理各种结构化和非结构化数据。

S3 的耐用性被设计为"11 个 9"(99.%),这意味着如果您使用 S3 存储对象,则可以预期平均每 10,000 年就会发生一次对象丢失。 今年,亚马逊宣布S3中存储的对象数量已超过200万亿,每秒需要处理数千万个请求。 如今,S3已经发展成为一个庞大而健壮的分布式存储系统。 为了保持数据持久性,亚马逊去年年底宣布升级S3的存储后端系统,并引入"自动推理"方法来确保"崩溃一致性"。 ,即系统崩溃时数据仍能保持"11个9"的一致性状态。

实现相对复杂,包含超过 40,000 行 Rust 代码。 Soft 用于提供崩溃一致性。 传统验证方法的速度跟不上系统的开发迭代速度。 使用轻量级的形式化方法()来提高可靠性,自动生成一系列操作来调用键值存储系统的接口,同时检查参考模型与具体实现之间的行为和状态是否相符。操作过程中保持一致。 基于上述方法,亚马逊成功发现并修复了16个涉及崩溃一致性和并发错误的重要问题。 亚马逊云技术也在SOSP会议上发表了相关论文,并获得了最佳论文奖。

网络

网络是云计算业务最基本的支撑之一。 亚马逊云技术拥有全球最大的骨干网络,拥有25个区域、81个可用区、14个本地区域、17个区域、300多个边缘站点和108个专线接入点。 它们是在2006年基于单一扁平子网的基础上经过16年的不断创新和优化而开发出来的。

在全球化浪潮下,许多大型跨国公司都会在全球设立多个站点。 在构建全球网络时,亚马逊云技术用户可以使用VPC创建多个虚拟网络。 传统的做法是使用VPC功能连接区域内或跨区域的VPC,并使用VPN或VPN将非亚马逊云技术基础设施与亚马逊云技术互连。 但如果云上的负载增加,管理工作就会成倍增加。 这时可以采用集中管理链路的方案。 亚马逊于 2018 年推出了 Re:。使用 Re:,可以显着简化管理并降低运营成本,因为每个网络只需要连接到其他网络,而不需要连接到所有其他网络。

当网络遍布全球并需要多种技术时,构建、管理和监控网络的复杂性就会显着增加。 在 2021 年 re: 大会上,亚马逊云技术宣布推出 Cloud WAN 全球网络托管服务。 借助这项网络服务,企业可以利用亚马逊的骨干网络,通过Cloud WAN图形界面一键创建自己的全球网络,设置中转网关或云连接,并监控网络运行状态、安全性和性能。

来源: 在 2021 年 re: 大会的主题演讲和博文中,还提到了亚马逊的"云(the cloud)"愿景,即通过有针对性的硬件和解决方案,带来亚马逊云技术推向新地区。

在博客中写道:"我们将在2022年见证一场转变:云将在边缘变得高度专业化。我们将为边缘提供量身定制的解决方案,无论是车间、餐厅、小型零售店还是远程位置所有地区都可以充分发挥云的优势。"

安全

没有安全的保证,云的所有优势都无从谈起。 随着数以百万计的组织上云,数据和流量更加集中,云已经成为安全攻防的主战场。 作为云计算领域的先行者,亚马逊首创的"共享安全责任模型"已经成为云安全联盟大家认可的事实上的行业标准。 该模型明确了云厂商和租户的安全边界,也明确了云厂商内部的安全边界。 安全责任。 今年,亚马逊云技术再次提出五层"洋葱防护方法论":威胁检测与事件响应、身份认证与访问控制、网络与基础设施安全、数据保护与隐私、风险管理与合规。 基于280多项安全合规服务和功能,亚马逊云技术利用这一五层防护体系为客户提供全方位的安全服务。

可持续发展

2015年,联合国制定了全球框架《巴黎协定》。随后,各缔约国制定了"碳中和"路径和目标,为全球环境的健康发展做出了承诺。 埃森哲分析表明,如果采用绿色方式迁移到公有云,全球每年可减少二氧化碳排放5900万吨,相当于动动手指就能减少2200万辆汽车的碳排放!

作为世界级科技巨头,亚马逊引领了"绿色云"的转型。 亚马逊表示将提前十年达成《巴黎协定》,并在2025年实现100%可再生能源,并且还设计了一套从基础设施到软件设计的前瞻性解决方案。 这些举措也取得了显著成效。 2021年,亚马逊云技术可持续发展架构副总裁表示:亚马逊云技术的基础设施能源效率比普通美国企业数据中心高3.6倍。 同时,亚马逊在执行相同任务时可以减少 88% 的碳足迹。

3、重构云基础:为客户创新、为未来创新

16年前诞生的亚马逊云技术,开创了云计算的新领域。 亚马逊的创新可以说对IT行业的演变产生了革命性的影响。

尽管当今云厂商竞争激烈,但亚马逊云技术始终处于市场领先地位。 相关数据显示,亚马逊云技术在云基础设施服务商中份额最大,占比33%,其客户已经突破百万。 无论是科技巨头、银行还是政府,不同的组织都在使用Web来开发和部署自己的应用程序。

典型的早期用户包括那些于 2009 年开始采用 Web 并于 2015 年中期关闭最后一个数据中心的用户。 纳斯达克自2014年以来一直使用Web在云中存储股票交易数据。今年它再次增加了边缘解决方案的使用,并将逐步开始迁移到亚马逊云服务。 NASA 从 2000 年开始使用 Web 服务提供照片、视频和音频的在线访问。上周,NASA 再次宣布将使用亚马逊云服务为空间站构建"太空物流"基础设施系统......

这样的成绩得益于亚马逊围绕客户业务不断进行技术创新。 有业内专家认为,亚马逊云技术的一大亮点就是能够对用户当前面临的问题非常敏感,并快速提供解决方案或产品。 这也正如 Dave Brown 所说:"我们可以应对几乎任何需求和挑战,并且永远不会对客户说不。在亚马逊云技术,我们拥有'客户至上'的文化,不仅满足他们当前的需求,而且还将预测他们未来的需求。" 以客户为中心、不断创新也是"Day one"理念的体现。

在面向未来的发展过程中,亚马逊云技术在过去16年里无疑有很多技术理念和决策经验值得学习和思考。

2022年4月20日,亚马逊云技术将在线举办创新大会。 这也是亚马逊首次专门关注云基础设施的技术会议。 它将设置6大分会场和30+前沿技术主题,将更全面、更详细地分享亚马逊。 云技术底层创新,诠释不同业务场景的应用,助您打造数据驱动型企业!

参考链接:

/2020/09/--with-硝基.html

/2021/10/using----to.html

/观看?v=

/2016/03/a--of-/

./aws--s3/

/doi//10.1145/。

/2021/12/tech--for-2022-and-.html

/cn/blogs//-aws--space-----reef/

相关推荐
Hoxy.R2 天前
银河麒麟 V10 离线安装 s3cmd 踩坑记录+存储负载均衡测试
linux·运维·华为·存储
哈哈浩丶4 天前
存储相关知识①—通用NAND Flash 基础
linux·存储·nand
跨境卫士—小依5 天前
低值包裹全面计税之后跨境卖家如何重做小额订单承接逻辑
大数据·人工智能·跨境电商·亚马逊·营销策略
跨境卫士苏苏5 天前
欧盟固定收费临近之后跨境卖家如何判断哪些轻小件先退出
大数据·人工智能·跨境电商·亚马逊·跨境
跨境卫士苏苏6 天前
经营变量持续增加之下跨境团队如何减少月度计划偏差
大数据·人工智能·内容运营·亚马逊·跨境
跨境卫士苏苏7 天前
欧盟固定收费临近轻小件卖家如何判断继续铺量还是收缩
大数据·人工智能·安全·跨境电商·亚马逊
故事还在继续吗8 天前
存储与IO子系统
存储·io子系统
赛贝维权申诉12 天前
Tour Striker高尔夫训练球美国发明专利维权,亚马逊listing被指控侵权下架!
亚马逊·知识产权·tro和解·tro亚马逊·tro侵权
smart199812 天前
创新SSD缓存性能,应用在数据库与VDI业务中性能表现显著提升
存储
七夜zippoe14 天前
DolphinDB数据压缩与存储优化
优化·存储·数据·压缩·dolphindb