迎接存储挑战
当前,各行各业数字化转型产生的海量数据为企业和传统数据中心带来了各式各样的存储挑战。仅就 IoT 领域,到 2024 年,将会有 70%的企业需要处理物联网数据,会有 380 亿物联网在线设备。业务的发展意味着数据的爆炸式增长,基于 IDC 数据,到 2025 年,有超过 100ZB 的存储缺口。机械硬盘成本低廉,但是随机性能低下,无法满足高并发需求。新兴的 SSD 性能优异,但是价格昂贵。容量更高、寿命更优、性能更优的企业级产品一直是各大存储厂商的目标。
QLC 作为一种容量优化的 NAND 闪存存储技术,和当前市场主流的 TLC 相比,可将闪存密度提高 33%,又因其成本更低,吸引了各大存储厂商竞相挖掘其潜力。但是 QLC 需要更高的电气精度来解决在读/写期间管理多个电压状态的额外复杂性,这导致了 QLC 设备的性能,寿命和可靠性降低。QLC 的寿命几乎是 TLC 的五分之一,随机写性能比 TLC 低 1~2 个数量级,可靠性也比 TLC 更差。因此在数据中心级的业务场景中受到很大限制。
有没有一种方案既能发挥 QLC 的容量优势,又能最大程度的优化 QLC 性能和寿命的不足呢?
为什么选 CSD2000 NVMe QLC SSD?
QLCNAND 加上 ScaleFlux 的透明压缩解决方案,通过在盘内集成的可计算存储引擎-透明压缩/解压功能,在数据具有较高可压性时,在 IO 路径上先对数据进行压缩之后再写入 NAND 闪存介质中,大幅降低了盘内物理空间的使用率,使得盘内空闲空间比标盘相比有显著优势。因此,盘内写放大、垃圾回收 GC 以及同一个 Die 中的读写冲突也就相对标盘能大幅降低,从而带来了性能和寿命的大幅提升。采用 QLC NAND 的 CSD 2000 SSD 极大地弥补了 QLC 本身的缺陷,能够极大地提升 QLC 设备的性能和寿命,使得 QLC 设备能够进入到写入要求高的数据中心级场景。
01更具性能优势
下图展现了某超大规模客户,真实业务场景数据压缩率 3:1 以上,CSD2000 NVMe QLC SSD 在随机混合读写的工作负载中,IOPS 性能比友商提升 42 倍。
02更长的寿命和更高的稳定性
下图展示了在标准写放大测试下压缩能带来的收益:企业级 7.68TB 的 CSD2000 NVMe QLC SSD 设备处于 1:1 的数据压缩比时,写放大因子为 4.83,当数据压缩比为 2:1 时,写放大因子为 0.55,写放大降低 89%。而写放大降低带来的直接好处就是寿命增加。
所以,ScaleFlux 的透明压缩技术,不仅可以有效降低写放大,还可以大幅度延长 QLC 的寿命:随机场景下,7.68TB 的 CSD2000 NVMe QLC SSD 的 64K 随机写的寿命(2:1 压缩率)是 16PBW,友商的 15.36TB QLC SSD 的 64K 随机写的寿命是 10.78PBW。ScaleFlux 的透明压缩和 QLC 的结合完美地弥补了 QLC 在性能,寿命和稳定性方面的短板,突破了其在写入负载方面的局限性。极大地拓展了 QLC 在数据中心的应用。
可计算存储下的 QLC:突破 QLC 的介质限制
腾讯云发现 ScaleFlux 的 SSD 设备通过下推压缩的算子可以显著降低闪存的写放大,提升随机写入的性能,于是在 年开始和 ScaleFlux 一起探索将透明压缩与 QLC NAND 介质相结合来解决 QLC 的随机写入性能和寿命的问题, 并于 年 Q2 开始了 QLC NVMeSSD 的在线应用。
腾讯云 NPI 负责人陈烽英表示:“我们看到,5G 时代已经到来,在 IoT、AI、区块链、自动驾驶等新兴技术中,以及在各种云存储、CDN 等应用场景中,QLC 因其低成本高容量的特性,将会有极大的发展空间。而 QLC 作为行业热点趋势,不仅驱动了新技术的发展,也带动了更多应用场景上的探索。我们希望通过与 ScaleFlux 在 QLC NVMe SSD 方面的合作,将可计算存储技术在存储方案中的独特价值发挥出来。”
ScaleFlux 主力参与推动的可计算存储是一个新兴领域,ScaleFlux 首席科学家张彤教授表示:透明压缩是开启计算存储盘(CSD)商业化的最佳选择,主要有两个原因:(1)透明:存储内透明压缩不需要对现有存储 I/O 软件堆栈进行任何更改,这确保了透明压缩可以无缝集成和部署到现有基础设施中,无需应用程序修改任一代码。(2)无损无负担:除了非常广泛的适用性之外,无损数据压缩涉及大量随机数据访问,这不可避免地会导致非常高的 CPU/GPU 缓存未命中率,从而使 CPU/GPU 硬件利用率非常低。因此,缓减主机端 CPU/GPU 执行无损数据压缩的负担变得极为重要。腾讯云主导的 QLC 介质和透明压缩的结合将突破 QLC 在写入负载方面的局限性,为其在数据中心的广泛应用打下基础。
写在最后
ScaleFlux 作为一家在闪存存储领域的创新性产品提供商,主打带透明压缩企业级 SSD 和 SSD 控制器产品。通过压缩来提升读写性能,提高稳定性和 SSD 寿命,让企业在成本,性能,安全之间找到最佳的平衡,打破传统存储的限制,为企业降低一半以上的存储成本,使企业不再为日益增长的数据存储担心,可以投入更多的精力到产品研发和业务发展中,真正做到降本增效。
ScaleFlux QLC 8TB 和 16TB 的 U.2 接口产品已经正式量产。请登录官网咨询更多信息/