在压缩文件上使用sed

Question

我已经编写了一个文件处理程序，现在它需要从一个压缩文件中读取（.gz解压缩的文件可能会变成2TB），

是否有sed等效文件（zcat / cat）之类的压缩文件，否则有效执行以下操作的最佳方法是什么？

    ONE=`zcat filename.gz| sed -n $counts`

$ counts：计数器读取（逐行）

上面的方法有效，但是对于大文件来说相当慢，因为我需要读取每一行并在某些字段上执行匹配。

谢谢

编辑

尽管没有直接帮助，但这里有一组zcommands

Answer 1

好吧，您可以具有更高的速度（例如，使用未压缩的文件）或更多的可用空间（即，使用压缩的文件和显示的管道）...对不起。 使用压缩文件总会有开销。

Answer 2

如果您了解压缩格式的内部结构，则可以编写一个模式匹配器，该模式匹配器可以在不完全解压缩的情况下对压缩数据进行操作，而是通过简单地从压缩数据确定模式是否存在于给定片段中来解压缩的数据。

如果模式根本没有任何复杂性，这听起来像是一个相当复杂的项目，因为您将不得不处理两个（或更多）单独的解压输出的组合可以满足该模式的情况。