linux 之父出席、干货分享、圆桌讨论,精彩尽在 opencloudos 社区开放日,报名戳
写点什么

2021 re:invent ,我们到底该关注哪些发布?-金马国际

  • 2021 年 12 月 09 日
  • 本文字数:4095 字

    阅读完需:约 13 分钟

2021 亚马逊云科技 re:invent 刚刚落下帷幕,许多开发者都在讨论今年亚马逊云科技 re:invent 的重磅发布。


这并不奇怪,每年亚马逊云科技 re:invent 都会有数十项新产品、新功能发布,其中一部分,可能代表了日后云计算及整个 it 界基础设施的发展方向,比如曾经的 amazon  redshift、amazon lambda,前者引导了业内云原生数仓的发展,后者则把无服务器带进了业内开发者的视线。


但今年的亚马逊云科技 re:invent 有些不一样,除了在产品性能上的常规迭代,更重要的是体现了云计算的服务在概念上的延伸。最为典型的,便是 amazon iot twinmaker 与 amazon iot fleetwise。

元宇宙与物联网:世界真的在云化


据官方介绍,amazon iot twinmaker 是一款可以让开发人员更加轻松、快捷地创建现实世界的数字孪生,如楼宇、工厂、工业设备和生产线。用户可以通过 amazon iot twinmaker,使用数字孪生来构建反映现实世界的应用程序,提高运营效率并减少停机时间。


数字孪生是物理系统的虚拟映射,可根据其所代表的现实世界对象的结构、状态和行为定期更新。amazon iot twinmaker 让开发人员可以轻松汇集来自多个来源(如设备传感器、摄像机和业务应用程序)的数据,并将这些数据结合起来创建一个知识图谱,对现实世界环境进行建模。


数字孪生技术最早是用于航空航天飞行器的健康维护与保障,属于冷门技术。但随着“元宇宙”概念的兴起,数字孪生技术越来越为人所熟知,因为数字孪生的本质特征是在信息世界对物理世界进行等价映射,因此成为元宇宙概念的重要支撑技术之一,尤其是工业元宇宙,应用更是广泛。


亚马逊云科技 re:invent 这次发布 amazon iot twinmaker 可以说,既与元宇宙相关,也与工业互联网有关。从前,云计算的服务范围,聚焦在互联网产业,面向所谓的传统产业,主要提供转型服务。但现在,云计算的服务外延正在飞速扩展,通过元宇宙这座桥,已将范畴扩大至整个物理世界的虚拟化映射。


与此紧密相关的是 amazon iot fleetwise。amazon iot fleetwise 使汽车制造商可以轻松地收集和管理汽车中任何格式的数据(无论品牌、车型或配置),并将数据格式标准化,方便在云上轻松进行数据分析。当数据进入云端后,汽车制造商就可以将数据应用于车辆的远程诊断程序,分析车队的健康状况,帮助汽车制造商预防潜在的召回或安全问题,或通过数据分析和机器学习来改进自动驾驶和高级辅助驾驶等技术。


如果说 amazon iot twinmaker 提供的是从现实世界到虚拟世界的映射服务,那么 amazon iot fleetwise 就是聚焦车联网领域,解决的是车联网长期以来的发展问题。车联网概念最早出现于 20 世纪 60 年代,但 60 年来,一直有点“瘸腿发展”的意思——大部分人对车联网的理解是,在车内提供网络服务,而不是将车辆数据上传分析。


直到 2012 年特斯拉 model s 出世,才把车联网作为必选功能,纳入汽车生产制造的流水线里。现在 amazon iot fleetwise 发布,把车联网相关服务全面引上云端。


amazon iot fleetwise 的一个重要特征是,可以在云中构建车辆的虚拟表示,并应用通用数据格式来构建和标记车辆属性、传感器和信号。amazon iot fleetwise 使用车辆信号规范 (vss) 对车辆建模进行标准化,以便“燃料压力”等信号始终表示为燃料压力,并以每平方英寸磅力 (psi) 和千帕 (kpa) 为单位进行测量。车辆建模后,上传标准 can 数据库 (dbc) 或 autosar xml (arxml) 文件,以便 amazon iot fleetwise 可以读取通过车辆控制器局域网总线 (can 总线) 发送的独特的专有数据信号。


看懂了吧,其实 amazon iot twinmaker 和 amazon iot fleetwise 的底层理念如出一辙,都是在云端构建虚拟映射,不过一个是针对工业领域,一个是针对汽车行业。可以说,这个世界正在虚拟化,同时也正在云化。

amazon sagemaker canvas:无代码创建 ml 模型


如果说 amazon iot twinmaker 和 amazon iot fleetwise 体现了云服务在横向上的概念延伸,那么 amazon sagemaker canvas 则是在纵向上的概念延伸。


大家都知道 amazon sagemaker ,作为一个已发布四年的全托管机器学习服务。amazon sagemaker 为开发者提供了一套完备的“中央厨房”,使用 amazon sagemaker 开发者只需准备好“食材”(数据)就可以直接开始做菜(训练模型),大大提升了开发人员和数据科学家构建、训练和部署机器学习模型的效率,开启了全新的智能时代。


但 ai 领域长期受到人才短缺问题的限制,而 ai 的应用领域正在增多,机器学习服务的门槛需要进一步降低。亚马逊云科技此次发布 amazon sagemaker canvas 的目的即在于此 —— 用无代码理念构建机器学习模型,做模型预测,保证在脱离数据工程团队的情况下,依然可以提供服务。它利用与 amazon sagemaker 相同的技术自动清理和组合您的数据,在幕后创建数百个模型,选择性能最佳的模型,并生成新的单个或批量预测。支持二元分类、多类分类、数值回归、时间序列预测等多种问题类型。



此前业内还有许多关于低代码、无代码的争议,但现在看来,这不是概念之争,而是产业内有确实的需要。amazon sagemaker canvas 的发布即是验证了这一情况。


站在整个 ai 的宏观层面而言,无论是基于 ai 提供的预测服务还是分析服务,也脱离了单纯对更高级别人工智能的追求,而兼顾 ai 能力对产业的赋能。这是云计算对服务理念的进一步扩大和贯彻。

amazon private 5g:用专有 5g 链接 iot 设备


而在这种情况下, amazon private 5g 的发布,自然也被许多人所关注,因为它是支撑服务外扩的重要和必要尝试。可以说,amazon private 5g 是本次 re:invent 最重要的发布之一。


在移动端,我们早就用上了 5g 通信服务,但企业需要的是专有 5g 服务网络。amazon private 5g 可自动设置和部署网络,并按需扩展容量以支持更多设备和网络流量。亚马逊云科技 ec2 副总裁 david brown 说:“借助亚马逊云科技私有 5g,我们将混合基础设施扩展到客户的 5g 网络,以简化、快速且廉价地建立私有 5g 网络。客户可以从小规模开始,按需扩展,按需付费,并从亚马逊云科技控制台监控和管理他们的网络。”


而 amazon private 5g 也重点服务了以工业 4.0 为主的庞大传感器和端侧设备集群,前文提到的工业元宇宙、车联网自然也在同一序列。


全球最大的非上市公司——美国科氏公司工业集团(koch)已经和亚马逊云科技就 amazon private 5g 达成了合作,而科氏企业集团的核心是石油与化工,也是亚马逊云科技比较有代表性的服务案例。

amazon graviton3:底层算力又升级了


当然,不管是  amazon iot twinmaker 等 iot 服务,还是 amazon private 5g,依靠的还是底层实例中的芯片性能。在今年的云栖大会上,阿里巴巴旗下半导体公司平头哥发布自研云芯片倚天 710 并宣布其性能超过 amazon graviton2 20%。


从 2019 年 amazon graviton,2020 年 amazon graviton2 到今天的 amazon graviton3,亚马逊云科技从芯片开始不断改进计算服务。与 amazon graviton2 相比,amazon graviton3 集成了 550 亿个晶体管,单核性能提升超过 25%,浮点和加密性能将提高两倍。在机器学习方面,amazon graviton3 包括对 bfloat 16 数据的支持,将能够提供高达 3 倍的性能。在性能飞跃的同时,amazon graviton3 能耗对比上一代产品下降了 60%。



新一代 amazon ec2 c7g 实例由 amazon graviton3 处理器支持,也是全球首个支持 ddr5 内容的云上计算实例。与由 amazon graviton2 处理器支持的当前一代 amazon c6g 实例相比,性能提高 25%。



当然,amazon graviton3 属于通用芯片,专用芯片也更新了。亚马逊云科技公布,由亚马逊第二款机器学习芯片 amazon trainium 支持的新 amazon trn1 实例,将为在云中为自然语言处理 (nlp)、计算机视觉、搜索、推荐、排名等用例训练深度学习模型提供最佳的性价比,与 p4d 实例相比,通过 amazon trn1 实例训练深度学习模型的成本降低达到 40%。


amazon nitro system 芯片也发布了新品。amazon nitro 可以说是个超级黑科技,准确来讲它是一个套架构,可以将服务器提供给用户的资源最大化,减少虚拟化损耗。所谓“虚拟化损耗”,就是以往为了维护服务其正常运行,在网络、存储、管理等系统功能方面做出的必然开销,这种开销要占到服务器总体性能的三成。nitro 架构就是通过定制硬件,关注这三成的性能问题。


而这次发布的 amazon nitro system 芯片,主要是支持 amazon ec2 instance 底层管理平台,可以替 cpu 分担工作负载。通用芯片、推理专用芯片、 amazon ec2 支持芯片,这次发布的是整整齐齐。amazon nitro ssds 的 im4gn/is4gen/ i4i 实例提供 30 tb 的 nvme 存储,与上一代 i3 实例相比,i/o 延迟降低了 60%,延迟可变性降低了 75%。

data serverless :无服务器应用迅速推广


当然,除了在网和端层面的服务能力扩展,此次在 serverless 层面的更新也值得注意。


业内都知道 amazon lambda 开启了 serverless 的时代,但真正获得业内的广泛赞同和跟随,还是在 2019 年。这次 亚马逊云科技 re:invent ,亚马逊云科技一口气发布了四个核心产品的 serverless 版本:amazon redshift serverless、amazon emr serverless、amazon msk serverless 和 amazon kinesis data streams on-demand。


amazon redshift 我们已经提过,是最早的云原生数仓;amazon emr 则是亚马逊云科技提供的 hadoop 托管服务;amazon msk 是 kafka 托管服务;而 amazon kinesis data streams on-demand 则是流式数据处理平台。



而这些服务的 serverless 版本则是让使用者单击几下即可运行使用这些框架构建的应用程序,而无需配置、优化或保护集群。


云端大数据架构,因为亚马逊云科技这些 serverless 版本服务的更新,其门槛正在飞速降低。以往像智能湖仓这种架构的搭建,让架构师、工程师很头疼,而现如今,工程师的工作正在变成单纯的调参 —— serverless 对产业生态的改变几乎是永久性的。

写在最后


从 2021 亚马逊云科技 re:invent 及今年各云计算大会的发布情况看,云计算领域的产品更迭,一是注重底层基础算力的升级,这属于硬核实力的比拼;二则是注重服务外沿的扩展,如何理解云、网、端三个角色,并提供尽量通用的公有云服务,成为关键。元宇宙则是当下新兴起的概念,为整体的技术发展方向提供了新的想法和方向,值得我们特别思考。


2021 年 12 月 09 日 15:222979

评论

发布
暂无评论
发现更多内容

gpu容器虚拟化:用户态和内核态的技术和实践详解

gpu容器虚拟化:用户态和内核态的技术和实践详解

网站地图