.net解析csv(C#导表工具)

C# 2021-01-27

前言

解析Excel有知名的NPOI库，（Java语言是POI），但是NPOI是不支持解析csv的。

csv本质上也是文本文件，可以进行差异对比，更利于解决冲突。

本文对解析csv的几个.net的开源库进行调研

很小巧简单的库：https://github.com/stevehansen/csv/
CSVHelper：https://github.com/JoshClose/CsvHelper
CSVHepler中文文档：https://segmentfault.com/a/1190000015396713

性能测试

本次性能测试结果来自：.NET Core中的CSV解析库

当测试100000行数据的时候

@H_404_30@

当测试1000000行数据的时候

从测试结果上看
Tiny Csv Parser的效率比CSVHelper高很多，内存占用也少很多。

最终结论
当不需要支持字符串换行的时候，请使用Tiny Csv Parser
当需要支持字符串换行的时候，请使用CSVHelper

测试csv

第二行中有人为换行符，在Tiny Csv 和 csv中会解析不出来，而CSVHelper则可以

Make	Model	Comment
内容1	内容2	这是一个换行, 的内容
内容2-1	内容2-1	单行注释

CSVHelper示例

如果要读取某行的原始数据，基本内容是在 csvReader.Context 字段

public static void ParseCsvDemo(string filePath)
{
	CsvReader csvReader = null;
	using (FileStream fileStream = new FileStream(filePath,FileMode.Open,FileAccess.Read))
	{
		using (StreamReader reader = new StreamReader(fileStream,Encoding.GetEncoding("GB2312")))
		{
			csvReader = new CsvReader(reader);
			//设置之后，不读取第一列，且列数也会减少
//                    csvReader.Configuration.HasHeaderRecord = false;

			int rowCount = 0;
			while (csvReader.Read())
			{
				//列数
				var columnCount = csvReader.Context.Record.Length;
				//每行的原始数据
				var raw = csvReader.Context.RawRecord;
				rowCount = rowCount + 1;
				if (rowCount == 2)
				{
					var fileName = csvReader.GetField<string>(2);
					Console.WriteLine("输出名：{0}",fileName);
				}
				Console.WriteLine("行：{0},列：{1}，内容：{2}",rowCount,columnCount,raw);
			}
		}
	}
}

注：对于csvhelper提供的映射关系（把表的一行数据结构转成 class类型），我未使用到，因为我们主要是提取表的数据。