File.ReadAllLines或流读取器

Question

我们可以使用StreamReader或File.ReadAllLines读取文件。

例如，我希望将每一行加载到List或string[]中，以便对每一行进行进一步操作。

string[] lines = File.ReadAllLines(@"C:\\file.txt");

foreach(string line in lines)
{
     //DoSomething(line);
}

或

using (StreamReader reader = new StreamReader("file.txt"))
{
    string line;

    while ((line = reader.ReadLine()) != null)
    {
       //DoSomething(line); or //save line into List<string>
    }
}

//if list is created loop through list here 

应用程序遇到不同大小的文本文件。它可以偶尔从很少的KBs发展到MBs。

我的问题是，哪种方式是首选的，为什么一种方式应该比另一种方式更好？

Answer 1

如果您希望在不将整个文件加载到内存的情况下处理文本文件的每一行，最好的方法如下：

foreach (var line in File.ReadLines("Filename"))
{
    // ...process line.
}

这避免了加载整个文件，并使用现有的.Net函数来完成此操作。

但是，如果出于某种原因需要将所有字符串存储在一个数组中，最好使用File.ReadAllLines() -但如果只使用foreach访问数组中的数据，则使用File.ReadLines()。

Answer 2

Microsoft在File.ReadAllLines中使用StreamReader：

    private static String[] InternalReadAllLines(String path, Encoding encoding)
    {
        Contract.Requires(path != null);
        Contract.Requires(encoding != null);
        Contract.Requires(path.Length != 0);

        String line;
        List<String> lines = new List<String>();

        using (StreamReader sr = new StreamReader(path, encoding))
            while ((line = sr.ReadLine()) != null)
                lines.Add(line);

        return lines.ToArray();
    }

Answer 3

StreamReader逐行读取文件，它将消耗较少的内存。然而，File.ReadAllLines一次读取所有行的并将其存储到中，会消耗更多的内存。如果string[]大于int.maxvalue，那么将产生32位操作系统的内存overflow(limit )。

因此，对于更大的文件，StreamReader会更有效率。