chenjiaxing
作者chenjiaxing·2021-12-06 10:38
系统架构师·浪潮商用机器有限公司

Power9 CPU片上硬件压缩技术及应用

字数 1142阅读 2344评论 0赞 1

随着测序技术的不断成熟以及政策的逐渐放开,基因测序在疾病早筛、微生物、遗传学检测等领域应用前景广阔,整个行业开始高速发展, 2012 年全球基因测序市场规模为 35 亿美元,截至 2015 年已上涨到 59 亿美元, 3 年增长为原来的 1.69 倍,复合年平均增长率 19.0% 。 2018 年中国基因检测市场规模达 105.9 亿元,消费者规模 140 万人,中国基因检测市场规模将在未来三年内保持稳定的增长,预计到 2022 年,中国的基因检测的市场规模进一步扩大,将达到 200.6 亿元,消费者规模将为 2984 万人,增幅较为可观。随着行业发展的不断成熟,企业数量和规模的增多,基因检测的消费者规模在未来三年会迎来爆发式增长

随着行业的发展,在基因测序中将产生海量的数据,这些数据的体量和数据的增长速度都达到了一个前所未有的高度。那么这些数据如何快速存储,如何有效减少数据处理、传送、存储的成本,成为众多基因测序公司 IT 部门需要考虑的问题,其中数据压缩技术将发挥极其重要的作用。而 Power9 服务器独有的 CPU 片上加速器 NXGZIP 硬件压缩加速技术能帮助解决这部分问题,大幅降低 IT 投入成本。

Power9 服务器支持 CPU 片上加速器,执行各种功能,如数据的压缩、解压缩、加密和解密。这个加速器可以实现 GZIP 函数,例如 GZIP 压缩和解压缩操作。其优势在于 :

  • 采用 CPU 硬件压缩功能,大幅提升压缩、解压性能
  • 压缩、解压同时只占用极少量 CPU 资源,客户可以利用 CPU 处理其它应用

该特点可以广泛适用于基因公司、互联网、金融等客户,其适合的业务场景包括但不限于下面特点:

  • 大量的数据 / 文件进行压缩、解压
  • 需要在服务器之间传送大量文件,但受限于网络带宽小导致文件传送时间长
  • 基于业务合规要求,有大量的冷数据需要备份(数据不需要经常访问),通过压缩减少存储空间
  • 等等

我们来看一组 X86 与 IPS K1 PowerLinux 之间数据压缩的性能对比:

测试选项压缩数据 (GB)压缩生成文件 (GB)压缩时间 (s)压缩速度(MB/s)压缩率
x86(igzip)22.828.463.28369.3437%
IPS K1 PowerLinux (nxgzip)22.988.74.245550.3138%

从数据对比可以看出,在实际业务场景中,采用 IPS K1 PowerLinux NxGzip 压缩的性能是 X86 服务器的 15 倍。

我们可以再参考下其它常用压缩软件与 IPS K1 PowerLinux NxGzip 的压缩、解压性能对比:

以及其它常用压缩软件与 IPS K1 PowerLinux NxGzip 的压缩率对比:

如果觉得我的文章对您有用,请点赞。您的支持将鼓励我继续创作!

1

添加新评论0 条评论

Ctrl+Enter 发表

作者其他文章

相关文章

相关问题

相关资料

X社区推广