【发布时间】:2020-10-16 13:48:49
【问题描述】:
众所周知,磁盘 I\O 很昂贵。 我通常使用 C# 从 .txt 文件中一次读取一行。 我突然想到,如果 C# 给你一种一次读取 100 行的方法,它将需要更少的磁盘往返行程,从而减少时间。 这可能吗? 有没有人对如何提高效率有任何想法。 我在大约一个小时内浏览了一个包含 100 万行的文件,一次读取和处理一行。 我想看看我是否可以显着减少这个时间。
【问题讨论】:
标签: c# text-files disk-io
众所周知,磁盘 I\O 很昂贵。 我通常使用 C# 从 .txt 文件中一次读取一行。 我突然想到,如果 C# 给你一种一次读取 100 行的方法,它将需要更少的磁盘往返行程,从而减少时间。 这可能吗? 有没有人对如何提高效率有任何想法。 我在大约一个小时内浏览了一个包含 100 万行的文件,一次读取和处理一行。 我想看看我是否可以显着减少这个时间。
【问题讨论】:
标签: c# text-files disk-io
FileStream 为您执行此操作,它有一个内部缓冲区并以块的形式读取文件。碰巧File.ReadLines 使用基于FileStream 的StreamReader 并根据行返回IEnumerable。它在本质上为您完成一切。
我的建议是使用File.ReadLines
如果您需要对内部缓冲区和块大小进行更细粒度的控制,请使用FileStream 和StreamReader,它允许配置这些问题等等...
【讨论】: