各种压缩技术性能比较

今天药忘吃喽~ 2022-05-12 04:22 233阅读 0赞

各种压缩技术性能比较：

<table style="width:500px;"> 
 <tbody> 
  <tr> 
   <th>Compressor name</th> 
   <th>Ratio</th> 
   <th>Compression</th> 
   <th>Decompress.</th> 
  </tr> 
  <tr> 
   <td><strong>zstd 1.3.4 -1</strong></td> 
   <td>2.877</td> 
   <td>470 MB/s</td> 
   <td>1380 MB/s</td> 
  </tr> 
  <tr> 
   <td>zlib 1.2.11 -1</td> 
   <td>2.743</td> 
   <td>110 MB/s</td> 
   <td>400 MB/s</td> 
  </tr> 
  <tr> 
   <td>brotli 1.0.2 -0</td> 
   <td>2.701</td> 
   <td>410 MB/s</td> 
   <td>430 MB/s</td> 
  </tr> 
  <tr> 
   <td>quicklz 1.5.0 -1</td> 
   <td>2.238</td> 
   <td>550 MB/s</td> 
   <td>710 MB/s</td> 
  </tr> 
  <tr> 
   <td>lzo1x 2.09 -1</td> 
   <td>2.108</td> 
   <td>650 MB/s</td> 
   <td>830 MB/s</td> 
  </tr> 
  <tr> 
   <td>lz4 1.8.1</td> 
   <td>2.101</td> 
   <td>750 MB/s</td> 
   <td>3700 MB/s</td> 
  </tr> 
  <tr> 
   <td>snappy 1.1.4</td> 
   <td>2.091</td> 
   <td>530 MB/s</td> 
   <td>1800 MB/s</td> 
  </tr> 
  <tr> 
   <td>lzf 3.6 -1</td> 
   <td>2.077</td> 
   <td>400 MB/s</td> 
   <td>860 MB/s</td> 
  </tr> 
 </tbody> 
</table>

可以看出：

zstd压缩率最高，适合冷存储

lz4压缩和解压速度最高，适合olap查询场景

参考：[https://github.com/facebook/zstd][https_github.com_facebook_zstd]

[https_github.com_facebook_zstd]: https://github.com/facebook/zstd

发表评论取消回复

表情：

评论列表（有 0 条评论，233人围观）

还没有评论，来说两句吧...

相关阅读

相关 pytorch系列(六)：各种优化器的性能比较

import torch import torch.utils.data as Data import torch.nn.functional as f

爱被打了一巴掌/ 2023年07月10日 11:22/ 0 赞/ 15 阅读

相关压缩技术

题目描述设某汉字由N × N的0和1的点阵图案组成。我们依照以下规则生成压缩码。连续一组数值：从汉字点阵图案的第一行第一个符号开始计算，按书写顺序从左到右，由上至

小咪咪/ 2022年11月30日 04:29/ 0 赞/ 107 阅读

相关 Java不同压缩算法的性能比较

本文将会对常用的几个压缩算法的性能作一下比较。结果表明，某些算法在极端苛刻的CPU限制下仍能正常工作。文中进行比较的算有： ●JDK GZIP ——这

矫情吗；*/ 2022年08月20日 11:22/ 0 赞/ 222 阅读

相关各种排序算法比较

1 排序的稳定性 (1) 稳定的排序 <table> <thead> <tr> <th align="left">稳定的排序</th> <

浅浅的花香味﹌/ 2022年08月01日 03:13/ 0 赞/ 231 阅读

相关 Java压缩算法性能比较

引用：https://my.oschina.net/OutOfMemory/blog/805427?from=20161218 前言游戏开发中，经常在玩家进入游戏的时候

叁歲伎倆/ 2022年06月08日 01:40/ 0 赞/ 235 阅读

相关 Java不同压缩算法的性能比较

转载自 [http://www.importnew.com/14410.html][http_www.importnew.com_14410.html] 本文将会对常用的几个

忘是亡心i/ 2022年05月18日 02:42/ 0 赞/ 204 阅读

相关 Java不同压缩算法的性能比较

译文出处： [Java驿站][Java] 原文出处：[java-performance][] 本文将会对常用的几个压缩算法的性能作一下比较。结果表明，某些算法在极端苛刻的

﹏ヽ暗。殇╰゛Y/ 2022年05月15日 02:14/ 0 赞/ 418 阅读

相关各种压缩技术性能比较

各种压缩技术性能比较： <table style="width:500px;"> <tbody> <tr> <th>Compressor name</th>

今天药忘吃喽~/ 2022年05月12日 04:22/ 0 赞/ 234 阅读

相关存储快照技术及各种存储快照技术的比较

存储快照技术及各种存储快照技术的比较转载自: [http://www.cnw.com.cn/storage-case/htm2012/20

谁借莪１个温暖的怀抱￠/ 2022年01月07日 04:19/ 0 赞/ 429 阅读

相关 Java各种递增性能比较和分析

一点睛 Java 中存在 Long、AtomicLong、LongAdder 三种类型递增，这里做一个测试，比较它们的性能，然后对测试结果进行理论分析。二代码

古城微笑少年丶/ 2021年07月24日 16:42/ 0 赞/ 403 阅读