我需要读取CSV文件，并针对每列将它们拆分为不同的数组

Question

我有一个非常大的数据文件，大约有60000行。我需要根据列将CSV文件拆分为每列的不同数组。

我有5列：State, County, Zipcode, Latitude, Longitude。

当我读取文件时，如何拆分它并按顺序将它们添加到每个数组中？

我会有一个用于State, County, Zipcode, Latitude和Longitude的数组。

Answer 1

使用CSV解析器-有很多用于.NET的解析器，甚至在VisualBasic名称空间中也有内置解析器。

参见TextFieldParser -尽管在VisualBasic名称空间中，它是一个常规的.NET库，可以由任何.NET语言使用。

这里有many other options。

Answer 2

如果你想手动完成(我也推荐使用TextFieldParser)，你可以使用一个StreamReader来循环所有行，并使用String.Split来分割你的分隔符(假设逗号)：

var stateList = new List<String>();
var countyList = new List<String>();
var zipCodeList = new List<String>();
var latitudeList = new List<String>();
var longitudeList = new List<String>();

using (var reader = new System.IO.StreamReader(@"C:\Temp\csv.txt"))
{
    string line;
    while ((line = r.ReadLine()) != null)
    {
        var fields = line.Split(new Char[] { ',' }, StringSplitOptions.RemoveEmptyEntries);
        stateList.Add(fields[0]);
        if (fields.Length > 1)
            countyList.Add(fields[1]);
        if (fields.Length > 2)
            zipCodeList.Add(fields[2]);
        if (fields.Length > 3)
            latitudeList.Add(fields[3]);
        if (fields.Length > 4)
            longitudeList.Add(fields[4]);
    }
}

如果您确实需要一个数组而不是一个列表：

String[] states = stateList.ToArray();
String[] counties = countyList.ToArray();
String[] zipCodes = zipCodeList.ToArray();
String[] latitudes = latitudeList.ToArray();
String[] longitudes = longitudeList.ToArray();