c# - 将 GZipStream 结果拆分为给定大小的 block ，保持其有效

Question

我在 byte[] 中有一堆数据，我使用像这样的 GZipStream 来压缩它。

byte[] input = ...;

var zipped = new MemoryStream();
using (var zipper = new GZipStream(zipped, CompressionMode.Compress, true)) {
  zipper.Write(input, 0, input.Length);
}

由于我的技术要求，我需要将结果分成 - 比方说 - 50k block ，以便每个 block 都可以解压缩并恢复原始数据的相应 block 。

如果我只是分割结果byte[]，这些 block 将不再形成有效的 GZip 存档，因此这不是一个好方法。

我也无法使用某种循环来停止以 block 大小进行压缩，因为不幸的是，GZipStream 无法报告压缩数据的当前长度。当我关闭压缩流时，我只得到长度，但随后我已经有了一个有效的存档，所以我不能从那里继续。

如何在将每个 block 保留为有效的 GZip 存档的同时做到这一点？

Answer 1

没有有效的方法来做到这一点，因为您无法在不压缩的情况下预测压缩输出的大小。 (除非您没有压缩并且仅使用存储 block 进行一些扩展，但我假设您需要压缩。)

您可以查看this example了解如何在固定 block 大小中获得尽可能多的压缩数据。它对每个 block 进行三次压缩以进行拟合。它对压缩数据进行两次解压缩，以估计适合的未压缩数据量，然后重新压缩该猜测。

您无法确保压缩数据完全适合您的 block 大小，因为添加一个未压缩字节可能会添加两个压缩字节，从而跳过您的确切 block 大小。然而，使用 gzip 格式，您可以作弊并在 header 中添加垃圾字节以将其填充到准确的数量。