新华三公司新闻

  • 产品与解决方案
  • 行业解决方案
  • 服务
  • 支持
  • 合作伙伴
  • 关于我们

Alluxio与新华三实现深度集成,为AI应用提供全面数据湖整合方案

【发布时间:2024-09-10】

近日,全球领先的高性能数据平台开发商Alluxio与紫光股份旗下新华三集团宣布,双方已成功实现Alluxio分布式缓存系统与新华三的全对称分布式融合存储H3C UniStor X10000深度集成。新华三X10000分布式融合存储系统凭借其强大的扩展性和先进的数据处理能力为AI应用提供了卓越的高性能数据存储平台。Alluxio分布式缓存系统可为新一代AI训练平台在整个模型训练及部署上线过程中提供加速服务。双方联合解决方案可进一步提升AI应用的数据存储与访问性能,显著提升AI模型训练和推理的效率,为AI智算场景下的各类复杂分析与计算任务提供稳定且高效的支持。

descript

强强联合,全局提升AI数据供给效率

H3C UniStor X10000分布式存储同时支持块、文件、对象与大数据存储,具备EB级单一命名空间的能力,为AI多样化场景下复杂异构数据提供了海量数据存储平台。Alluxio可以在AI/ML和大数据分析场景起到加速数据访问的作用,面向上层应用提供一个统一的命名空间,将底层的多个存储系统(如HDFS、S3、NFS 等)整合到一个虚拟的存储层中,从而使应用程序能够更加方便地访问和管理数据。

descript

双方的联合解决方案能够形成显著的互补效应,提升底层数据存储读写性能,为上层应用提供一个统一的数据服务视图,同时Alluxio基于新华三X10000实现底层存储容量无缝扩展。测试结果显示,联合解决方案可为上层AI应用提供高效数据供给,数据读写性能随节点数整体呈现倍数关系,可通过增加客户端提升集群的整体输出能力。

聚焦AI,加速创新应用落地

提升AI应用性能:双方的合作为企业在AI模型训练、AI模型应用等各个AI应用场景提供了高效的数据存储和访问平台,在现有GPU计算资源相对紧张的大背景下,充分发挥GPU的利用率,加速AI应用迭代的效率,加速AI创新和应用落地。

降低AI应用成本:联合方案利用较少的高性能缓存资源提供了匹配全闪分布式并行文件存储的数据访问性能,有效兼顾了海量数据存储和高性能数据访问的需求,大大降低存储成本。

增强AI应用的可扩展性:Alluxio Enterprise AI 平台和H3C UniStor X10000的有机结合,还可以轻松应对大规模AI应用对海量数据存储的需求,随着企业业务的发展和数据量的增加,系统可以轻松地扩展计算资源和存储资源,确保AI应用的持续稳定运行。

展望未来,新华三与Alluxio在AI领域将持续展开深入合作,通过将X10000数据存储产品与Alluxio平台进行无缝集成,双方不仅致力于推动技术融合,还在联合方案的开发和市场推广方面携手前行。这一合作将极大提升数据存储与访问效率,推动人工智能应用的创新发展,为行业客户打造更为智能、高效的解决方案,开启广阔的合作前景。

关于H3C UniStor X10000

H3C UniStor X10000系列存储,是新华三集团自主研发的新一代全对称分布式存储,通过领先的分布式融合架构,提供强大线性扩展能力,同时拥有高性能、高扩展、高可靠、易管理维护等特性,广泛适用于云计算、虚拟化、AI、HPC、归档备份等各类场景,面向政府、金融、企业、运营商、广电等各行业用户提供海量存储资源服务。

关于Alluxio Enterprise AI 平台

Alluxio Enterprise AI 平台是针对 AI 相关场景的数据平台,可在本地、云、混合或多云环境中,支持无缝访问、管理和运行大数据和人工智能工作负载,综合优化企业AI和大数据分析基础设施的性能、数据可访问性、可扩展性和成本效益,助力生成式AI、计算机视觉、自然语言处理、大语言模型和高性能数据分析等下一代数据密集型应用的发展。

新华三官网
联系我们