谷歌推出三种新的云存储:FUSE、Parallelstore、NetApp Volumes

来源:网界网 | 2023-08-30 11:33:31

  谷歌最近推出了三种新的云存储选项:用于需要文件系统语义的人工智能(AI)应用程序的云存储FUSE,用于使用GPU的高要求AI和HPC应用程序的并行文件系统并行存储,以及用于在云中运行的企业应用程序的NetApp Volume。

  云存储FUSE已经作为开源版本提供,允许将云存储桶中的对象作为安装在本地文件系统中的文件进行访问。该公司针对人工智能工作负载,在可移植性、可靠性、性能和集成性方面进行了新的改进。

  谷歌高级产品经理Akshay Ram解释道:新的云存储FUSE对于AI工作负载尤其重要。因为应用程序可以直接访问数据(而不是本地下载),所以在复制数据时,没有需要实现的自定义逻辑,也减少了TPU和GPU等宝贵资源的空闲时间。此外,Google Kubernetes引擎(GKE)的新的云存储FUSE CSI驱动程序允许应用程序使用熟悉的Kubernetesneneneba API安装云存储,它是由GKE管理的交钥匙部署。

  除了用于AI应用程序的云存储FUSE外,谷歌还宣布了一个名为Parallelstore的并行文件系统的私人预览,该系统通过为AI/ML和HPC工作负载提供高性能并行文件存储解决方案,帮助用户停止浪费宝贵的GPU资源,同时等待存储I/O。该解决方案基于下一代Intel分布式异步对象存储(DAOS)体系结构。

  谷歌存储产品经理Sean Derrington在解释了新的云存储选项:基于下一代英特尔 DAOS 架构,Parallelstore 环境中的所有计算节点都具有对存储的同等访问权限,因此虚拟机可以立即访问其数据。与竞争对手的 Lustre Scratch 产品相比,Parallelstore 具有高达 6.3 倍的读取吞吐量性能,非常适合需要极高性能(IOPS 和吞吐量)和超低延迟的基于云的应用程序。

  最后,第三个新的云存储选项是NetApp Volumes,这是一种完全由谷歌管理的高性能文件存储服务。此存储选项专为希望将其应用程序迁移到本地 NetApp 存储阵列上的企业而设计。该服务提供了将卷从 100GiB 增加到 100TiB 以实现最大可扩展性的功能,为混合工作负载实施 ONTAP 数据管理,以及无需重构即可将 Windows 或 Linux 应用程序作为虚拟机运行。

  当被InfoQ问及是什么推动了谷歌的这项投资时,Derrington是这样说的:随着人工智能在自动化数据管理方面发挥作用,组织正在转向云,为正确的应用程序提供正确的存储解决方案。借助谷歌云新的 AI 优化存储产品、谷歌云存储FUSE 和 Parallelstore,我们通过提供量身定制的存储解决方案来简化运营、解锁创新、降低成本等,从而帮助客户适应复杂的 AI 工作负载。

  云存储FUSE 和 NetApp Volumes 可通过谷歌云Console 获得,而 Parallel Store 可通过谷歌客户经理获得。

相关阅读

每日精选