多线程压缩工具pigz

对于ubuntu：

sudo apt install pigz

对于Centos：

sudo yum -y install pigz

conda安装：

conda install -y pigz

pigz没有压缩文件夹的选项，只能压缩单个文件。若想压缩文件夹，可以结合tar使用：

多线程压缩

time tar -cvf - my_data/ | pigz -p 32 > my_data.tar.gz

多线程解压

time pigz -p 8 -d my_data.tar.gz

常用参数：

• -0 ~ -9 压缩等级，数字越大压缩率越高，速度越慢，默认为6
• -k --keep 压缩后不删除原始文件
• -l --list 列出压缩输入的内容
• -K --zip Compress to PKWare zip (.zip) single entry format
• -d --decompress 解压缩输入
• -p --processes n 使用n核处理，默认为使用所有CPU核心