• 产品与解决方案
  • 行业解决方案
  • 服务
  • 支持
  • 合作伙伴
  • 关于我们

多快稳简 | 一骑绝尘也不过如此,新华三分布式存储为什么这么“快”?

【发布时间:2022-08-19】

爆炸式增长的海量数据、数字化转型过程中企业对数据价值的迫切需求,无不要求存储系统要“快”字当先。然而,受磁盘本身IO瓶颈的影响,要满足关键应用场景下的海量数据快速读写需求并非易事。

作为数字化解决方案的领导者,紫光股份旗下新华三集团对前沿技术一直有着自己深刻的洞察。新华三全对称分布式存储系统H3C UniStor X10000以“多快稳简”特性,获得了行业客户的广泛应用和充分认可。

优秀硬件配置实现强劲性能

X10000提供全面的节点配置,通过优秀的硬件系统保障系统的性能表现。

性能优秀的NVMe+SCM:X10000 全闪节点NVMe+SCM强强联合,并借助X10000独特的GCAA全局缓存聚合加速技术,可聚合多个节点的SCM缓存空间,在SSD和内存之间形成大容量高性能的缓存池,保障缓存池掉电不丢数据。

https://mmbiz.qpic.cn/sz_mmbiz_png/AdrPzSLibEPm3ODylq4B2gcAhTG7Il4ghG4mWyTZ1IDpXZ8953eWb2p5MCTI0693WxcKgKfgZWYmiawMeFprPzyw/640?wx_fmt=png

经测试,NVMe+SCM全闪节点可达15万IOPS,单集群可以提供数千万IOPS。即使是在文件存储和对象存储的场景下,全闪节点也可以提供单节点7万IOPS,传输带宽达到4GB/s,满足用户对于顺滑读写性能的要求。

软硬协同读写加速:除了主打高性能的全闪节点之外,X10000还有丰富的混闪及HDD节点可供选择,为了充分发挥不同介质的性能表现,同时实现性能与成本的兼顾,X10000还提供了诸多智能软件功能,优化整体系统性能表现,包括快慢池、智能预读等。

SSD数据分层读写加速

快慢池部署加速写入速度: X10000系统会自动创建两个硬盘池,包括SSD盘组建的快池,与HDD组建的慢池。其中,快池采用多副本策略实现冗余备份,慢池支持多副本或纠删码策略达到数据容错目的。同时,系统支持智能IO 存储,小IO文件优先写入快池,可充分利用SSD固态盘IOPS性能优势,而大IO文件则优先落入慢池,避免占用SSD空间。

https://mmbiz.qpic.cn/sz_mmbiz_jpg/AdrPzSLibEPm3ODylq4B2gcAhTG7Il4ghIaLvrXxunRhbgicNAPyIzMVdgX60eD0EHNfP3Ad1iaOhj0lW7yfxjX8A/640?wx_fmt=jpeg

动态下刷读写加速:当保存在SSD中的数据热度下降达到下刷水位时标记下刷,达到淘汰水位时,则淘汰已经下刷的数据至慢池。当慢池中的数据热度上升后,会将热数据提升到快池,起到热数据加速的目的。

智能预读提升顺序读性能

智能预读显著提升命中率:为了进一步提升顺序读性能,X10000还特别提供了智能预读技术。根据智能学习用户的使用行为习惯、使用频率,智能数据预读技术可以缩小存储池与应用程序之间的巨大IO带宽差距,改善系统整体性能。

在执行顺序读过程中,X10000只需读取数据头,即可自动判断即将读取的是哪个文件及存储块的对应关系,并提前从OSD对象存储单元将数据载入缓存,供应用程序执行调用,显著提高了预读命中率及系统缓存效率。

元数据分离部署加速小文件读写

降低小IO影响,发挥系统强劲性能:传统存储系统在数据写入时,会将数据文件及对应的元数据文件存放在一起。由于元数据大小一般只有KB级别,海量小IO文件在读写时将严重拖慢系统整体响应速度。

新华三集团X10000分布式存储系统针对海量的元数据读写特别做了优化。在执行写入操作时,将数据文件和对应的元数据文件分开存放,元数据文件放入SSD固态硬盘中,可以显著降低小IO文件对系统性能的影响,最大程度地发挥存储池的IO和带宽性能。

https://mmbiz.qpic.cn/sz_mmbiz_jpg/AdrPzSLibEPm3ODylq4B2gcAhTG7Il4ghuPv8P1xMVTBkyfEWsCVkpweebAeBK3OW8Bm3unaUkpQHM3J5A7ubHA/640?wx_fmt=jpeg

数据已经完全重构了世界,随着AI、5G、IoT等新兴应用的蓬勃发展,分布式存储必将成为承载数字世界的重要基础平台。过去的几年中,新华三集团UniStor X10000分布式存储系统连续在运营商、政企客户集采中大份额中标,在电信、政企、医疗、企业等各行各业均获得了广泛应用。X10000分布式存储的性能、可靠性以及新华三的服务能力,已经在广泛的用户应用场景中经受了严苛考验。在领略了X10000“多快稳简”特性中的“多”、“快”之后,X10000又“稳”在哪里呢?

新华三官网
联系我们