数据规模无限拓展,引领Serverless之路|re:Invent2023首日演讲
创始人
2024-02-07 20:58:49
0

原标题:数据规模无限拓展,引领Serverless之路|re:Invent2023首日演讲

全新 Amazon Aurora Limitless Database 可自动扩展到每秒数百万个写入事务并管理 PB 级数据,同时保持操作单个数据库的简单性;

全新 Amazon ElastiCache Serverless 可以更快、更轻松地创建高可用缓存服务并立即扩展以满足应用程序需求;

全新 Amazon Redshift Serverless 使用 AI 模型来预测工作负载并自动扩展和优化,提供高达10倍的性价比提升。

在每年的亚马逊云科技 re:lnvent 大会,由 Peter DeSantis 带来的《周一晚间直播》是 re:lnvent 大会的第一个并让人值得期待的主题演讲。作为亚马逊云科技高级副总裁,Peter 今天发布了数据库和应用领域的三项 Serverless 创新,使客户能够更快、更轻松地扩展其数据基础设施,以支持苛刻的业务用例。

随着熟悉的背景音乐,Peter 上台开始了今天的精彩演讲。他首先回顾了近年来亚马逊云科技在其庞大云服务体系上构建大规模的 Serverless 服务的过程,包括用于存储的 Amazon S3、用于计算的 Amazon Lambda、以及用于数据库的 Amazon DynamoDB。Serverless 的核心理念是消除管理服务器和基础设施的负担。通过使用 Serverless 服务方式,用户无需再关心升级软件、修补操作系统、淘汰旧主机以及验证新主机等问题。

Peter 同时介绍了亚马逊云科技在其所有产品中广泛使用的六个重要的云计算服务属性:安全性、可用性 、可扩展性、性能效率、成本效率和可持续性。Peter 解释称,Serverless 通过这些设计理念,在亚马逊云科技庞大的基础设施之上运行,并在大量客户中共享计算资源。

每个客户的实际运行负载只占总体容量和基础设施的一小部分,这使得 Serverless 更具成本效益。因为客户只需支付所用资源的费用,而不是传统的预配容量。Serverless 还使亚马逊云科技能够更有效地运营其基础设施,闲置资源减少,这意味着更环保。由于这些服务从设计之初开始,就利用亚马逊云科技的基础设施,使得它们可以提供增强的安全性能,以及可达99.999%的可用性。

之后,Peter以 “Road to Serverless” 为主题,展开了对 Serverless 发展的解读。从2018年,亚马逊云科技推出了 Amazon Aurora Serverless,它能够根据工作负载需求自动无缝地调整数据库容量,而无需对数据库进行任何调整或故障切换。这是通过一种名为 Caspian 的创新功能实现的,它是一个创新的虚拟机监控程序、热度管理系统和对数据库引擎本身的更新与结合。这些使得 Amazon Aurora 数据库可根据负载变化,以毫秒为单位快速调整内存容量。

随着 Amazon Aurora Serverless 的推出,我们在 Serverless 的进程中向前迈出了一大步。在介绍了如何扩展数据库的许多场景之后,Peter 得出结论:“我们仍然受到物理服务器大小的限制,这并不是 Serverless。但是,数据库分片是一种众所周知的改进技术。考虑到将数据水平划分为子集并将其分布到一堆物理上独立的数据库服务器(称为分片),以利用单个服务器的数据库性能。” 显然,水平扩展是答案,但如何实现当今数百万用户系统所需的史诗级扩展呢?

重磅发布:Amazon Aurora Limitless Database

Peter 宣布推出 Amazon Aurora Limitless Database,客户可轻松扩展其数据库,突破单个服务器的容量限制,并通过数据库分片实现高性能。有了无限的数据库,就无需担心新增需要管理的新数据库,您的应用程序只是一个可用的数据库入口。” Peter 介绍到,“这大大降低了复杂性,将推动先进的云数据管理的发展。”

Amazon Aurora Limitless Database 提供单一接口,并自动在多个数据库分片间扩展和复制数据。亚马逊云科技还利用 Amazon Aurora Database 自身构建了一个快速路由层,以高效地将查询路由到适当的分片,实现所有分片间的快速分布式数据交换。

重磅发布:Amazon ElastiCache Serverless

Peter 宣布推出 Amazon ElastiCache Serverless,这是一种新的无服务器选项,允许客户在一分钟内创建缓存并根据应用程序流量模式立即扩展容量。Amazon ElastiCache Serverless 与两种流行的开源缓存解决方案 Redis 和 Memcached 兼容。

客户可以使用 Amazon ElastiCache Serverless 为要求苛刻的工作负载运行缓存,而无需花费时间进行容量规划或需要缓存专业知识。Amazon ElastiCache Serverless 持续监控应用程序的内存、CPU 和网络资源利用率,并立即进行扩展以适应其所服务的工作负载访问模式的变化。客户可以创建一个高度可用的缓存,其中的数据可跨多个可用区自动复制,并为所有工作负载提供高达99.99%的可用性服务级别协议 (SLA),从而节省客户的时间和费用。

客户希望能够极其简单地部署和操作缓存。Amazon ElastiCache Serverless 提供了简单的端点体验,抽象了底层集群拓扑和缓存基础设施。客户可以降低应用程序复杂性并提高运营卓越性,而无需处理重新连接和重新发现节点。使用 Amazon ElastiCache Serverless,无需任何前期成本,只需为使用的资源付费。客户需要为应用程序消耗的缓存数据存储量和 ElastiCache 处理单元 (ECPU) 资源付费。

Peter 继续分享 Serverless发展之路:2021年,亚马逊云科技推出了 Amazon Redshift Serverless,它自动化了数据仓库的缩放、数据布局和数据管理。然而,对于一些苛刻的工作负载,仍需要人工干预。Peter 通过介绍一些具有挑战性的数据仓库模式来展示这些问题:

对于仪表板和报告的小型查询,需要持续低于秒级的低延迟;

对于大型 ETL 批处理作业,需要在不干扰其他工作负载的情况下高效运行。这些作业可能处理数十亿行;

对于特殊的复杂分析查询,需要优化性能而不影响生产工作负载。这些查询可能是典型查询的10-100倍大小。

重磅发布:Amazon Redshift Serverless

下一代 AI 驱动的扩展和优化功能

Peter 发布了一项新的 Amazon Redshift Serverless 功能:下一代 AI 驱动的扩展和优化。该功能使用 AI 模型来预测工作负载并自动扩展和优化资源,将现有的基于查询态的资源分配升级为基于查询、数据量级计算复杂度等多方面维度,利用机器学习模型将计算资源动态分配,以帮助客户实现性价比目标。

亚马逊云科技在 Serverless 技术方面以开创性工作为基础,旨在帮助客户管理任何规模的数据并大幅简化其运营,以便他们能够专注于为最终用户进行创新,而无需花费时间和精力来配置、管理和扩展其数据基础设施。主要包含以下能力:

基于机器学习的预测模型,能够预测未来工作负载模式并提前调整资源容量。

实时查询分析器,利用机器学习估算每个查询的资源需求并进行合理分配。该系统能分析每个查询的超过50个独特特征。

针对客户需求,优化每个查询以降低成本或提高性能。查询具有线性、次线性和超线性等不同扩展模式。

借助这些创新,Amazon Redshift Serverless 能够优化处理不同类型的大小型复杂生产工作负载,从而将性价比提升高达10倍。

关于未来的探索 - 量子计算

在前沿技术领域,Peter 带着观众在亚马逊云科技量子计算方面的努力进行了精彩的探索,包括亚马逊云科技为实现量子计算所做的工作。现阶段在量子计算领域常见的挑战是量子比特噪音过大,无法满足高要求的计算需求。

Peter 讲述了逻辑量子比特的故事以及亚马逊云科技为使其具有商业可行性所做的工作。我们做好准备至少花费五年的时间来解决这个技术问题。因为这项技术对于解决科学研究、密码学、药理学和其他领域的问题至关重要。所有这些都将通过云计算对外提供。

引领 Serverless 发展

亚马逊云科技在 Serverless 领域面向数据库、缓存服务和数据仓库的最新能力发布,引领着 Serverless 未来的发展方向。永远为客户创新,是亚马逊云科技的主旨,也是 Peter 的主题演讲收场内容。减轻不必要的繁重工作,亚马逊云科技将致力于为客户持续创新!

让我们共同见证亚马逊的一小步

云计算的一大步

相关内容

热门资讯

原创 中... 本文跟大家汇总一下中路的国服战力情况,本文对比数据是七月末分享的排名,看看这些英雄有没有什么明显的变...
撤离冒险射击游戏《ARC Ra... IT之家 8 月 16 日消息,发行商 NEXON 在财报中透露,由瑞典 Embark Studio...
《塞尔达传说:旷野之息》Bet... IT之家 8 月 16 日消息,开发者 Crementif 去年 12 月为任天堂《塞尔达传说:旷野...
歧路旅人大陆的霸者:120级N... 《歧路旅人大陆的霸者》国服开放索里斯蒂亚大陆后,每开放一章主线剧情就会放出一位对应的,在当时的版本堪...
原创 三... 说实话,要说现在这个三角洲行动里面最惨的干员是哪个?我说是盾哥深蓝,想必没什么人会反对吧?我多次提到...
王者小李飞刀获取方式揭晓!体验... 大家好,8月14日,体验服再次迎来重大更新。 其中,策划不仅会继续削弱敖隐这位T0射手,还会对最近才...
《玩具总动员3》Xbox 36... IT之家 8 月 15 日消息,据外媒 VGC 当地时间 14 日报道,下月起,《玩具总动员 3》X...
原创 王... 虽然S2赛季延期了,但是对于新手玩家来说,一点都没有影响。那么,妃寒这个英雄应该怎么出装,铭文又应该...
JDG终结TTG八连胜,无畏违... KPL精彩赛事依旧在火热进行中,今天的三场大战已经全部结束,周末看比赛就是爽,官方安排的对决都很精彩...
原创 1... 随着第三轮比赛的深入,比赛是越来越激烈了。A组的六支战队,争夺四张季后赛的门票。而S组的六支战队,则...
资讯:AL超越BLG登顶LPL... 根据雷竞技娱乐记者第一手资讯:AL战队在组内赛以2比1击败TT,凭借这场胜利攀升至LPL积分榜榜首。...
PDD 空降畅玩服冲击榜一,细... 8月14日,《逆水寒》黄金畅玩服新服开放。原定下午两点开放的服务器,因为玩家们的过于热情,瞬间挤爆,...
原创 “... 北京时间2026年8月16日,英雄联盟LPL第三赛段将在这一天分别迎来LGD对阵JDG、WBG对阵i...
原创 S... 大家好我是指尖,S44赛季已经过半,这时间过得可太快了,本文来分享一下对抗路的国服战力情况。 数据取...
全网预约破5000万!《王者万... 王者IP新游终于来了!8月7日青岛发布会正式官宣:公测定档9月,全网预约突破5000万。全棋手免费兑...
腾讯投资、研发5年:最像好莱坞... 该赚钱了。 文/修理 知道国产单机发展快,但我还是没想到,现在连线下试玩会都已经开始卷起来了。 去年...
BLG文波受伤细节曝光,雨天穿... LPL精彩赛事依旧在火热进行中,今天依旧有三场精彩的比赛等着大家,因为是周末,官方也很懂,大家休息的...