华人澳洲中文论坛

热图推荐

    深剖“云端翻新” 看懂亚马逊云科技“干货集”

    [复制链接]

    2022-12-29 07:41:07 16 0

    作者:郝俊慧 来源:IT时报
    13年前,当《阿凡达》第一次以缤纷的“潘多拉星球风光”降服全世界时,人们其实不知道,导演卡梅隆用4000台办事器搭建了一个宏大的线下数据核心,用35000多个CPU做整部电影的渲染,渲染时间达288万个小时。
    如今,13年过来,正在热映的《阿凡达2》中湛蓝的水世界,渲染时间达33亿小时,是第一部的十一45倍,但从第一帧到第33亿帧,一共只用了8个月。“没有亚马逊云科技的反对,咱们将无奈实现阿凡达2。”《阿凡达2》制片人如是表现。
    打造虚构世界和仿真世界,是不是使用云的后果差别不言而喻,而这只是亚马逊云科技在寰球运用的案例之一。
    不久前举办的2022 re:Invent寰球大会上,亚马逊云科技公布了一系列重磅的新办事、产品、功用和运用,涵盖底层根底架构、计算、数据库、数据剖析、芯片、AI/ML、平安、行业运用等方面,其中多个案例均为初次发布,可谓亚马逊云科技的“年度干货集”。

    rx4yvoyynjf.jpg

    rx4yvoyynjf.jpg


    关于正在减速数字化转型的中国政府和企业而言,这些站在科技潮头的改造和重塑很有鉴戒意义。
    纳斯达克:打造证券行业的下一代云根底设施
    去年re:Invent上,纳斯达克宣告,要把本人的中心买卖交合处置引擎搬家到亚马逊云科技上,往年的re:Invent,纳斯达克“Call Back”了这个抉择,宣告旗下的MRX中心买卖零碎曾经搬家到亚马逊云科技。
    买卖撮合是一个定单转化成买卖的一个中心零碎,是寰球资本市场的根底架构基石,而MRX是纳斯达克旗下6个美国期权市场之一,这些任务负载象征着,不只对全部提早高度敏感,同时也对平安高度敏感,迁徙的实现标记着纳斯达克在寰球资本市场构建了一个下一代的根底设施。
    在纳斯达克迁徙到亚马逊云科技的过程当中,Amazon Outposts表演中心角色。它将亚马逊云科技的根底设施、办事、API和工具扩展到简直一切数据核心、主机托管空间或当地设施,纳斯达克能够从其位于新泽西州卡特雷特的次要数据核心提供超低提早的边沿计算功用。这些基于Amazon Outposts所构建的全新云零碎能够对端到端、定单到买卖提供一个两位数的微秒级提早,而且在双向买卖提早取患了10%的机能晋升。
    这还不是整个。目前纳斯达克有130多个市场技术客户,涵盖买卖所、银行、清理所、地方证券存管机构和监管机构,这些机构目前都依赖纳斯达克的中心买卖、清理、结算和监控技术。将来,纳斯达克方案与亚马逊云科技协作开发多种可行的云办事模式,包孕私有云和混合云,为它的市场技术客户提供云端迁徙办事。
    Netflix:对海量数据放弃高机能剖析
    20十二年,Netflix即加入了首届re:Invent,作为寰球当先的融媒体供给商,2006年转型流媒体的Netflix,2008年便成为亚马逊云科技的客户。如今,Netflix的各个环节中都可看到亚马逊云的痕迹。
    好比爆款剧《王冠》的第四季,即是采取基于亚马逊云科技的云上任务室,解决了因新冠疫情寰球盛行而致使的制造困难,由 10 名艺术家组成的《王冠》外部创作团队近程合作,顺利实现第4季10集中的600多个镜头,时间仅用八个月,制造本钱也大大升高。
    Netflix用到亚马逊云的另外一个首要标的目的是如何应答海量数据时期的到来。亚马逊云科技大中华区产品部总经理陈晓建给出一组数据:Expedia是寰球当先的游览办事供给商,具有超过70个PB的数据,每一年会做6000亿次AI预测;三星有超过十一亿终端客户,每秒钟收到8万次申请;Pinterest是在北美提供视频图片网站的办事供给商,他们在亚马逊云科技上存储的图片数据超过1个EB,至关于100万个TB,而 Netflix呢?天天要为十亿条用户流量办事,同时天天为了反对用户最好体验,要从全部一切的出产零碎中采集将近TB的日志数据而且进行剖析。
    将来5年所发生的数据,将是此前所发生数据的两倍还要多,数据将像星空同样广袤,曾经不是将来的,而是理想,如何去办理海量数据,挖掘数据的价值,对每个企业来讲一方面是微小的应战,另外一方面也蕴含有限的价值。
    这些互联网巨头要思考的是,如安在数据高速增长的同时放弃高机能的处置?本次re:Invent也给出了谜底。
    Amazon Aurora是亚马逊云科技的云原生瓜葛数据库办事,其自动扩展功用能够将每一个个数据库的实例自动拓展到最大十二8个TB,使用本钱是传统的商业数据库的非常之一摆布。Amazon DynamoDB是业界第一个云原生数据库。它在2022年亚马逊云科技会员日时每秒处置申请超过一亿个,是十分高机能的间值数据库。Amazon Redshift有少量的用户,天天处置的Amazon Redshift数据量都超过一个EB,性价比是其余云数仓的五倍。
    另外,Amazon DocumentDB的Elastic Clusters不只能够反对每秒钟数百万次读写申请,同时能够把Amazon DocumentDB的存储容量从64TB一下子拓展32倍达两个PB。
    阿凡达:由芯片、协定等组成的高机能计算生态
    正如前文所言,采取了亚马逊云科技办事的《阿凡达2》,大大缩短了视觉殊效制造的时间,而打造基于3D的虚构世界,与去年开始便爆火的概念——“仿真”“数字孪生”同样,都需求少量繁杂的高机能计算。
    亚马逊云科技曾经延续7年获取HPC WIRE最好HPC云平台名称,这应该源自其通过多年打造的残缺的HPC办事生态。
    生态中最首要的天然是芯片。经过10年研发,亚马逊云科技构建了3条自研芯片的产品线,包罗曾经开展了4代定制化芯片Nitro,三代基于ARM架构的CPU处置器Graviton和两款用于机器学习训练和推理的芯片。

    giw3ouwwvt4.jpg

    giw3ouwwvt4.jpg


    陈晓建引见,好比Graviton3E,是专门为高机能计算设计的最新芯片,它配备了200Gbps低延时带宽,十分合适计算密集型的HPC运用,为浮点和向量指令运算进行了优化,好比说计算流膂力学、份子能源学和天气摹拟等等。从用户场景来看,在HPC新一代数据丈量工具上,Graviton 3E比拟于Graviton3有35%的晋升,在份子静止剖析场景上机能能够晋升十二%,在金融期权定价方面能够晋升30%的机能。
    在亚马逊云科技全部自研芯片家族里,除了Graviton,还有Nitro。Nitro是将底层架构专业硬件化、云办事器虚构化的芯片,如今已开展到第五代。从第一代Nitro的网络机能的万兆级别(10Gbps),到当初的100GB,机能晋升了10倍。Nitro V5晶体管数量是上一代Nitro的两倍,全部数据包的转发才能晋升了60%,提早增加了30%,每瓦特的机能晋升了40%。
    另外,亚马逊云科技本人开发的网络协定SRD,也是撑持高机能计算的“独门武器”。陈晓建以视频流举例称,利用SRD,传输时能够将视频流打散,多条门路并行传输,接纳方则经过序号进行乱序重组。经过SRD协定,网络单条流的最大流量从5GB晋升至25GB,增长了5倍,并且因为SRD协定是在网络全部底层Nitro芯片上完成的,所以对用户彻底通明,用户依然使用TCP/IP协定,Nitro会自动地把TCP/IP协定适配到SRD,到了对端之后再把这个恢复成TCP/IP的包。
    “不需求千军万马过阳关道,即可以带来极高的网络吞吐量和极低的延时,以及更高的牢靠性。任何一条门路假如出问题不会影响你全部流量的间断。”陈晓建表现。

    o1apdfhi5yc.jpg

    o1apdfhi5yc.jpg

    发表回复

    您需要登录后才可以回帖 登录 | 立即注册

    返回列表 本版积分规则

    :
    注册会员
    :
    论坛短信
    :
    未填写
    :
    未填写
    :
    未填写

    主题31

    帖子40

    积分189

    图文推荐