EXAScaler文件系统基于智能存储理念经过全面升级之后,又添加了新的功能,包括更高的聚合读写带宽、更低的读写延迟、更快的文件检索访问效率等等,系统数据处理能力有了质的提升,那么全新升级的EXAScaler文件系统到底有什么样的变化呢?
  DDN基于Lustre的新版EXAScaler文件系统增加了赋能人工智能和方便企业应用的特征,EXAScaler文件系统是AI、数据分析和高性能计算(HPC)领域中强大的并行文件系统,EXA6延续了EXAScaler的领导地位,是更强的安全性、丰富的数据服务和端到端数据管理的基础。新版本运行在新的管理框架EXAScaler Management Framework (EMF)上,并具有可用于配置和管理的应用程序接口(APIs)。因其很高的自动化程度(比其他文件系统高10倍),EXA6极大地简化了管理和升级系统,其新特征包括:
  1、在线升级
  2、增强自动分层能力
  3、Hot Nodes支持客户端持久缓存
  尤其值得一提的是新增的加速技术Hot Nodes。深度学习模型通常需要多次重读数据集,这种多阶段的学习过程给计算、网络和存储都带来很重的负载。Hot Nodes可以自动地将数据缓存在NVIDIA GPU 系统的本地NVMe上,由于避免了网络的来回通信,因而减少了IO延迟和流量。具备新的Hot Nodes能力的EXAScaler文件系统增强了计算、网络和存储中数据路径的端到端效率,提高了任意规模AI系统的性能标杆。
  DDN的新版EXAScaler文件系统在扩展性、数据储存和处理等方面都有了较好的改进,解决了之前的众多系统问题,提升了EXAScaler文件系统使用体验。在DDN官网上还有更多与EXAScaler文件系统相关的而介绍,感兴趣的朋友可以在官网进行了解。