Convert.ToBase64String() 时发生 System.OutofMemoryException 错误

Question

我正在尝试使用以下方法将 zip 文件转换为文本文件 (xml)。它适用于较小的文件，但似乎不适用于大于 50 mb 的文件。

class Program
{
    public static void Main(string[] args)
    {
        try
        {

            string importFilePath = @"D:\CorpTax\Tasks\966442\CS Publish error\CSUPD20180604L.zip";

            int maxLengthInMb = 20;
            byte[] payLoad = File.ReadAllBytes(importFilePath);
            int payLoadInMb = (payLoad.Length / 1024) / 1024;
            bool splitIntoMultipleFiles = (payLoadInMb / maxLengthInMb) > 1;
            int payLoadLength = splitIntoMultipleFiles ? maxLengthInMb * 1024 * 1024 : payLoad.Length;

            if (splitIntoMultipleFiles)
            {
                foreach (byte[] splitPayLoad in payLoad.Slices(payLoadLength))
                {
                    ToXml(payLoad);
                }
            }              
        }
        catch (Exception ex)
        {
            throw new Exception(ex.Message);
        }
    }

    public static string ToXml(byte[] payLoad)
    {
        using (XmlStringWriter xmlStringWriter = new XmlStringWriter())
        {
            xmlStringWriter.WriteStartDocument();
            xmlStringWriter.Writer.WriteStartElement("Payload");

            xmlStringWriter.Writer.WriteRaw(Convert.ToBase64String(payLoad));
            xmlStringWriter.Writer.WriteEndElement();
            xmlStringWriter.WriteEndDocument();
            return xmlStringWriter.ToString();
        }
    }
}

我有一个 120 MB 大小的 .zip 文件，我得到了 System.OutOfMemoryException 调用 Convert.ToBase64String() 时。

所以我继续将字节数组拆分为 20 mb 大小的块，希望它不会失败。但是我看到它一直有效，直到它通过循环 3 次，即能够转换 60mb 的数据，并且在第 4 次迭代中我得到了同样的异常。有时我也会在 return xmlStringWriter.ToString()

行遇到异常

为了拆分字节[]，我使用了以下扩展类

public static class ArrayExtensions
{
    public static T[] CopySlice<T>(this T[] source, int index, int length, bool padToLength = false)
    {
        int n = length;
        T[] slice = null;

        if (source.Length < index + length)
        {
            n = source.Length - index;
            if (padToLength)
            {
                slice = new T[length];
            }
        }

        if (slice == null) slice = new T[n];
        Array.Copy(source, index, slice, 0, n);
        return slice;
    }
    public static IEnumerable<T[]> Slices<T>(this T[] source, int count, bool padToLength = false)
    {
        for (var i = 0; i < source.Length; i += count)
        {
            yield return source.CopySlice(i, count, padToLength);
        }
    }
}

我从以下链接获得了上面的代码 Splitting a byte[] into multiple byte[] arrays in C#

有趣的是，当我在控制台应用程序中运行程序时，程序运行良好，但是当我将此代码放入 Windows 应用程序时，它会抛出 System.OutOfMemoryException。

Answer 1

最好你想做这样的事情

            byte[] Packet = new byte[4096];
            string b64str = "";
            using (FileStream fs = new FileStream(file, FileMode.Open))
            {
                int i = Packet.Length;
                while (i == Packet.Length)
                {
                    i = fs.Read(Packet, 0, Packet.Length);
                    b64str = Convert.ToBase64String(Packet, 0, i);
                }
            }

您应该使用该 b64str 创建您的 xml 数据。 此外，一次性在堆栈上分配 20mb 空间通常是不明智的。