是否有不使用连续内存的开源 MemoryStream 实现？答案

【问题标题】：Is there an open source MemoryStream implementation that does not use contiguous memory?是否有不使用连续内存的开源 MemoryStream 实现？
【发布时间】：2012-03-14 16:35:41
【问题描述】：

Like GuyFawkes，我想用MemoryStream来存储大量数据，但是一直遇到'out of memory'的异常。
TomTom 的回答是我想做的 - 使用不需要连续块的实现 - 但我想知道是否已经有一个免费的实现可用，以节省我自己编写一个？

有谁知道 MemoryStream 的一个很好的、免费的重新实现可以用于大型流的吗？

编辑：

MemoryMappedFile 解决方案非常有趣，我会在其他项目中记住它，但是正如 Henk 所说，它与 MemoryStream 的目标抽象相距甚远。具体来说，就是已知容量的要求。
替换应处理的数据在某些情况下会非常大，但在其他情况下则相对较小（不，我们不知道它会是什么，直到为时已晚；））；此外，该类的许多实例将同时存在。最终，使用 MemoryMappedFiles（确定每个文件的适当大小）所需的工作将等同于实现 TomTom 的解决方案。

【问题讨论】：

StringBuilder 中的一个类似问题已在 .NET 4 中通过更改实现以使用绳索来修复。谷歌搜索“内存流绳索”只会产生最后的程序员命中。 64 位操作系统是百元的解决方案。
好的，我认为缺少（酒吧 Eric 和 dtb 很有趣，但不是我所需要的）答案为“否”，因此我自己实现了它。它不是特别复杂，但如果有人能推荐最好的地方，我会上传它？
@HansPassant，绳索是一本有趣的读物，谢谢（即使谷歌搜索“内存流绳索”并不完全鼓舞人心！）对于我的项目，虽然我只需要数百兆字节的流，所以我的实现中的简单列表就足够了。

标签： c# .net memorystream

【解决方案1】：

如果有人需要，这是我的实现；我会暂时保留这个问题，以防有人仍然回答更好。

http://www.codeproject.com/Articles/348590/A-replacement-for-MemoryStream

【讨论】：

【解决方案2】：

您将创建一个没有文件的MemoryMappedFile，即存在于系统内存中的文件。 DelayAllocatePages 选项延迟分配，直到实际需要内存。不过，您需要提前指定最大容量。使用CreateViewStream Method 创建流。

【讨论】：

谢谢你和埃里克；我尝试实现 MemoryMappedFile 解决方案，但它不太适合这种情况（我在问题中添加了额外的细节来解释）。
在你的进程中这不是仍然需要完全相同数量的连续虚拟地址空间，因此不能解决问题吗？

【解决方案3】：

不完全是 MemoryStream 的重新实现，但请考虑是否可以使用 Memory Mapped File 来满足您的要求。

内存映射文件可以解决大内存缓冲区可以解决的许多类型的问题，非常高效，并且由 .NET 直接支持。

【讨论】：

AFAIK 内存映射文件必须具有固定大小。
你确定吗？我相当确信内存映射文件在您的进程中需要一块连续的虚拟地址空间。他们无助于解决这个问题。