执行 GZipStream 压缩时抛出 System.OutofMemoryException答案

【问题标题】：System.OutofMemoryException throw while doing GZipStream Compression执行 GZipStream 压缩时抛出 System.OutofMemoryException
【发布时间】：2012-08-27 13:35:26
【问题描述】：

我正在以 win 形式工作。执行以下操作时出错。当我尝试连续运行大约 2-3 次操作时，它向我显示 System.OutOfMemoryException 错误。似乎.NET 无法释放操作中使用的资源。我用于操作的文件很大，大约超过 500 MB。

我的示例代码如下。请帮助我如何解决错误。

try
{
   using (FileStream target = new FileStream(strCompressedFileName, FileMode.Create, FileAccess.Write))
   using (GZipStream alg = new GZipStream(target, CompressionMode.Compress))
   {
       byte[] data = File.ReadAllBytes(strFileToBeCompressed);
       alg.Write(data, 0, data.Length);
       alg.Flush();
       data = null;
    }
}
catch (Exception ex)
{
    MessageBox.Show(ex.ToString());
}

【问题讨论】：

而不是ReadAllBytes，打开源文件并在循环中使用它的Read方法
ReadAllBytes 是杀手锏 - 这会让你的内存超过 500 MB
究竟是哪一行导致了OOM异常？
byte[] data = File.ReadAllBytes(strFileToBeCompressed); OOM 来的那条线
对您之前问题的接受答案仍然适用stackoverflow.com/questions/12038694/…

标签： c# .net out-of-memory gzipstream

【解决方案1】：

将ReadAllBytes 替换为Stream.CopyTo

using (FileStream target = new FileStream(strCompressedFileName, FileMode.Create, FileAccess.Write))
using (GZipStream alg = new GZipStream(target, CompressionMode.Compress))
{
    using (var fileToRead = File.Open(.....))
    {
        fileToRead.CopyTo(alg);
    }
}

【讨论】：

这将自动使用合理的缓冲区大小，但如果您想指定缓冲区大小，则需要使用 CopyTo() 重载。没有必要 IMO，只是让 OP 知道它在那里。默认缓冲区大小仅为 4096。

【解决方案2】：

一个非常粗略的例子可能是

// destFile - FileStream for destinationFile 
// srcFile - FileStream of sourceFile
using (GZipStream gz = new GZipStream(destFile, CompressionMode.Compress))
{
     byte[] src = new byte[1024];
     int count = sourceFile.Read(src, 0, 1024);
     while (count != 0)
     {
         gz.Write(src, 0, count );
         count = sourceFile.Read(src, 0, 1024);
     }
}
// flush, close, dispose ..

所以基本上我将您的ReadAllBytes 更改为只读1024 字节的块。

【讨论】：

是的，但是 CopyTo 更容易。另外，使用更大的缓冲区，例如 8*1024 。
当然你是对的 Henk，但我确实认为 amit 可以自己适应这一点。 @CopyTo thx 提示！

【解决方案3】：

您可以尝试使用此方法压缩文件MSDN link

    public static void Compress(FileInfo fileToCompress)
    {
        using (FileStream originalFileStream = fileToCompress.OpenRead())
        {
            using (FileStream compressedFileStream = File.Create(fileToCompress.FullName + ".gz"))
            {
               using (GZipStream compressionStream = new GZipStream(compressedFileStream, CompressionMode.Compress))
               {
                      originalFileStream.CopyTo(compressionStream);                                
               }
            }
        }
    }

用法：

string directoryPath = @"c:\users\public\reports";

DirectoryInfo directorySelected = new DirectoryInfo(directoryPath);

foreach (FileInfo fileToCompress in directorySelected.GetFiles())
{
    Compress(fileToCompress);
}

【讨论】：