shell 常用命令合集

sed 删除空行

只删除纯空行

sed '/^\s*$/d' file

删除纯空行和由空格组成的空行

sed '/^[  ]*$/d' file

使用pigz提升压缩效率

正常使用tar或者zip这类压缩命令,是单进程进行压缩的,无法充分利用CPU多核心的优势。可以结合pigz提升压缩效率。

可以通过使用 tar 命令结合 pigz 来替代 zip 命令进行压缩。tar 命令可以创建一个归档文件,而 pigz 可以用于压缩该归档文件。这样可以达到类似 zip 命令的效果,同时利用 pigz 的多线程优势提升压缩速度。

tar -cvf - demo/ | pigz -p 8 > demo.tar.gz

在这个例子中:

  • tar -cf - demo/ 会创建一个 tar 归档文件,并将其输出到标准输出。
  • pigz -p 8 会使用 pigz 将标准输出的 tar 归档文件进行压缩,并将压缩后的数据保存到 demo.tar.gz 文件中。
  • -p 8 指定了使用 8 个线程,可以根据你的 CPU 核心数调整这个值。