今天,16 年 2016 月 2013 日,Quobyte 宣布发布 TensorFlow 文件系统插件,允许 TensorFlow 应用程序直接与 Quobyte 集成,而无需通过操作系统内核。 Quobyte 成立于 XNUMX 年,为包括雅虎在内的各种客户提供软件定义存储。 日本。 TensorFlow 是一种广泛使用的开源软件库,常用于机器学习应用程序。
Quobyte 的新 TensorFlow 文件系统插件在 Linux 系统上运行。 Quobyte 希望该插件允许较旧的遗留 Linux 服务器在机器学习应用程序中使用他们的技术。 他们声称他们的存储系统可用于机器学习的所有阶段,并为每个客户端提供高达 10GB/s 的吞吐量。 该插件与 Quobyte 集成,通过优化 GPU 使用以减少延迟和 CPU 负载,帮助充分利用所有配置的系统资源,Quobyte 声称它为 TensorFlow 用户提供高达 30% 的吞吐量提升。
Quobyte 的 TensorFlow 文件系统插件的其他优势包括:
- 无需繁琐的分层即可利用 HDD 和 SSD 获得最佳性价比的能力
- 预取训练数据可以显着提高性能。 许多机器生成的数据使用顺序命名约定,这使得它非常适合预取。
- 无限可扩展性,允许用户在需要时在吞吐量和容量方面增加存储。 随着 ML 项目需求的变化——通常比预期的更快——Quobyte 安装将进行调整。 需要时可以快速轻松地添加磁盘或服务器,以提供更多容量或性能,而不会中断应用程序或服务。
- 多租户通过允许用户在同一集群内定义隔离的命名空间和数据/工作负载的物理分离来提供额外的安全性。 管理员可以通过控制他们可以访问哪些物理硬件来进一步隔离租户,以确保性能,并且网络上任何未经授权的用户都无法访问数据。
可用性
立即




Amazon