压缩指南 Slack

MinIO服务器允许流式压缩以确保有效的磁盘空间使用。压缩是在飞行中发生的,即对象在写入磁盘之前已被压缩。MinIO klauspost/compress/s2由于其稳定性和性能而使用流式压缩。

该算法专门针对机器生成的内容进行了优化。每个CPU内核的写吞吐量通常至少为300MB / s。解压缩速度通常至少为1GB / s。 这意味着在原始IO低于这些数字的情况下,压缩不仅会减少磁盘使用量,而且有助于提高系统吞吐量。 通常,当可以压缩内容时,在旋转磁盘系统上启用压缩将提高速度。

开始使用

1. 先决条件

安装MinIO - MinIO 快速入门指南.

2. 通过压缩运行MinIO

可以通过更新compress MinIO服务器配置的配置设置来启用压缩。配置compress设置采用扩展名和mime类型进行压缩。

$ mc admin config get myminio compression
compression extensions=".txt,.log,.csv,.json,.tar,.xml,.bin" mime_types="text/*,application/json,application/xml"```

默认配置包括最常见的高度可压缩的内容扩展名和mime类型。

$ mc admin config set myminio compression extensions=".pdf" mime_types="application/pdf"

使用默认扩展名和mime类型对所有内容启用压缩。

~ mc admin config set myminio compression

压缩设置也可以通过环境变量来设置。设置后,环境变量将覆盖compress服务器配置中定义的配置设置。

export MINIO_COMPRESS="on"
export MINIO_COMPRESS_EXTENSIONS=".pdf,.doc"
export MINIO_COMPRESS_MIME_TYPES="application/pdf"

3. 注意

即使所有类型都启用了压缩,所有具有这些扩展名和mime类型的文件都将从压缩中排除。

测试设置

要测试此设置,请练习使用mcmc ls在数据目录上使用来对服务器进行调用,以查看对象的大小。

进一步探索