20221124_01.md

DuckDB 0.6.0 压缩算法增加: FSST, Chimp, Patas 提升字符串和浮点数压缩能力

作者

digoal

日期

2022-11-24

标签

PostgreSQL , PolarDB , DuckDB

---

背景

https://duckdb.org/2022/11/14/announcing-duckdb-060.html

https://duckdb.org/2022/10/28/lightweight-compression.html

DuckDB 数据存储支持轻量级列压缩框架, 已内置多种压缩算法, 0.6.0 新增了FSST, Chimp, Patas压缩算法, 分别用于字符串和浮点类型的压缩.

FSST 对于唯一值较多, 但是样式类似的字符串存储, 例如邮箱地址, 压缩效率很不错.

Compression	Size
Uncompressed	761MB
Dictionary	510MB
FSST + Dictionary	251MB

期望 PostgreSQL|开源PolarDB 增加什么功能?

PolarDB 云原生分布式开源数据库

PolarDB 学习图谱: 训练营、培训认证、在线互动实验、解决方案、内核开发公开课、生态合作、写心得拿奖品

PostgreSQL 解决方案集合

德哥 / digoal's github - 公益是一辈子的事.

购买PolarDB云服务折扣活动进行中, 55元起

About 德哥