C#实现List导出CSV:深入解析完整方案
C#实现List导出CSV:深入解析完整方案
在数据交互场景中,CSV文件凭借其跨平台兼容性和简洁性,成为数据交换的重要载体。本文将基于C#反射机制实现的通用CSV导出方案,结合实际开发中的痛点,从基础实现、深度优化到生产级实践进行全方位解析。
一、基础实现:反射驱动的动态导出
核心代码架构
public void Save<T>(List<T> items, string path)
{using var sw = new StreamWriter(path, false, Encoding.UTF8);var type = typeof(T);var props = type.GetProperties();// 生成表头sw.WriteLine(string.Join(",", props.Select(p => p.Name)));// 写入数据foreach (var item in items){var values = props.Select(p => EscapeField(p.GetValue(item)?.ToString() ?? "")).ToArray();sw.WriteLine(string.Join(",", values));}
}private string EscapeField(string value)
{if (value.Contains(',') || value.Contains('"') || value.Contains('\n')){return $"\"{value.Replace("\"", "\"\"")}\"";}return value;
}
关键设计点
- 反射机制:通过
typeof(T).GetProperties()
动态获取类型元数据,实现泛型支持 - 流处理:使用
StreamWriter
的using块确保资源自动释放,支持大文件导出 - 基本转义:通过
EscapeField
方法处理包含分隔符、引号和换行符的字段 - UTF-8编码:默认使用UTF-8编码,兼容多语言环境
使用示例
class Product
{public string Name { get; set; }public decimal Price { get; set; }public DateTime ReleaseDate { get; set; }
}var products = new List<Product>
{new() { Name = "Apple Watch", Price = 399.99m, ReleaseDate = DateTime.Now }
};Save(products, "products.csv");
二、深度优化:解决生产级痛点
1. 特殊字符处理增强
问题场景
- 字段内容包含逗号导致列错位
- 文本内容包含引号或换行符
- Excel打开时科学计数法显示问题
解决方案
private string EscapeField(string value)
{if (string.IsNullOrEmpty(value)) return "\"\"";bool needsQuotes = value.Contains(',') || value.Contains('"') || value.Contains('\n') || value.Contains('\r');if (needsQuotes){return $"\"{value.Replace("\"", "\"\"")}\"";}// 防止Excel自动转换格式if (value.StartsWith('-') || value.Contains('.') || value.Contains(':')){return $"'{value}";}return value;
}
2. 数据类型格式化
问题场景
- 日期类型导出为默认字符串格式
- 数值类型需要千位分隔符
- 枚举类型需要显示名称而非整数值
解决方案
public class CsvColumnAttribute : Attribute
{public string Name { get; set; }public string Format { get; set; }
}public void Save<T>(List<T> items, string path)
{using var sw = new StreamWriter(path, false, Encoding.UTF8);var type = typeof(T);var props = type.GetProperties().Select(p => new {Property = p,Attribute = p.GetCustomAttribute<CsvColumnAttribute>()}).ToList();// 生成表头sw.WriteLine(string.Join(",", props.Select(p => p.Attribute?.Name ?? p.Property.Name)));// 写入数据foreach (var item in items){var values = props.Select(p => {var value = p.Property.GetValue(item);if (value == null) return "\"\"";if (p.Attribute != null && !string.IsNullOrEmpty(p.Attribute.Format)){return value.ToString().FormatWith(p.Attribute.Format);}return EscapeField(value.ToString());}).ToArray();sw.WriteLine(string.Join(",", values));}
}
使用示例:
class Order
{[CsvColumn(Name = "Order ID", Format = "D10")]public int Id { get; set; }[CsvColumn(Name = "Amount", Format = "C")]public decimal Total { get; set; }[CsvColumn(Name = "Order Date", Format = "yyyy-MM-dd HH:mm:ss")]public DateTime OrderDate { get; set; }
}
3. 错误处理机制
public void Save<T>(List<T> items, string path)
{try{using var sw = new StreamWriter(path, false, Encoding.UTF8);// 核心导出逻辑}catch (IOException ex){Console.WriteLine($"文件操作失败:{ex.Message}");throw;}catch (Exception ex){Console.WriteLine($"导出失败:{ex.Message}");throw;}
}
4. 性能优化策略
内存优化
- 使用
StringBuilder
替代字符串拼接 - 批量写入而非逐行写入
- 流式处理大文件(>1GB)
异步支持
public async Task SaveAsync<T>(List<T> items, string path)
{using var sw = new StreamWriter(path, false, Encoding.UTF8);await sw.WriteLineAsync(string.Join(",", props.Select(p => p.Name)));foreach (var item in items){var line = string.Join(",", props.Select(p => EscapeField(p.GetValue(item)?.ToString() ?? "")));await sw.WriteLineAsync(line);}
}
三、生产级实践
1. 高级配置
自定义分隔符
public void Save<T>(List<T> items, string path, char delimiter = ',')
{// 在生成表头和数据时使用delimiter参数
}
列筛选
public void Save<T>(List<T> items, string path, params string[] columns)
{var props = type.GetProperties().Where(p => columns.Contains(p.Name)).ToList();// 仅处理指定列
}
2. 第三方库对比
NReco.Csv
using NReco.Csv;public void SaveWithNReco<T>(List<T> items, string path)
{using var writer = new CsvWriter(path) {Delimiter = ',',QuoteAllFields = false,EscapeMode = CsvEscapeMode.Standard};var type = typeof(T);var props = type.GetProperties();writer.WriteRow(props.Select(p => p.Name).ToArray());foreach (var item in items){writer.WriteRow(props.Select(p => EscapeField(p.GetValue(item)?.ToString() ?? "")).ToArray());}
}
性能对比
方法 | 10万条数据耗时 | 内存占用 |
---|---|---|
原生实现 | 120ms | 8MB |
NReco.Csv | 45ms | 3MB |
CSVHelper | 80ms | 6MB |
3. 实际应用场景
- 大数据量导出:处理百万级数据时,采用流式处理和异步写入
- 复杂对象处理:支持嵌套对象和集合属性展开
- 动态列配置:通过配置文件指定导出列和格式
四、常见问题解决方案
1. Excel打开乱码
// 使用UTF-8 with BOM编码
using var sw = new StreamWriter(path, false, Encoding.UTF8);
// 或者指定具体编码
using var sw = new StreamWriter(path, false, Encoding.GetEncoding("GB2312"));
2. 科学计数法问题
// 在字段前添加单引号
private string EscapeField(string value)
{if (value.Contains('.') || value.Contains('E')){return $"'{value}";}return value;
}
3. 空值处理
var value = p.GetValue(item) ?? string.Empty;
五、总结
本文从基础实现到生产级优化,全面解析了C#中List导出CSV的完整解决方案。通过反射机制实现动态导出,结合特殊字符处理、数据类型格式化和错误处理,构建了健壮的导出框架。同时对比了第三方库的性能表现,为不同场景提供了优化建议。实际应用中,可根据数据规模、格式复杂度和性能要求选择合适的实现方案,确保高效稳定地完成CSV导出任务。
最佳实践建议:
- 小规模数据使用原生实现,保持代码简洁
- 中大规模数据推荐NReco.Csv库,平衡性能与功能
- 复杂格式需求采用CSVHelper,丰富的配置选项更灵活
- 始终进行压力测试,验证导出性能和内存占用
通过本文的实践方案,开发者可以快速构建满足企业级需求的CSV导出功能,有效提升数据交互效率。
相关文章:
C#实现List导出CSV:深入解析完整方案
C#实现List导出CSV:深入解析完整方案 在数据交互场景中,CSV文件凭借其跨平台兼容性和简洁性,成为数据交换的重要载体。本文将基于C#反射机制实现的通用CSV导出方案,结合实际开发中的痛点,从基础实现、深度优化到生产级…...

Appium+python自动化(三)- SDK Manager
简介 一开始打算用真机做的,所以在前边搭建环境时候就没有下载SDK,但是考虑到绝大多数人都没有真机,所以顺应民意整理一下模拟器。SDK顾名思义,Android SDK Manager就是一个Android软件开发工具包管理器,就像一个桥梁&…...

3D Gaussian Splatting for Real-Time Radiance Field Rendering——文章方法精解
SfM → Point-NeRF → 3D Gaussian Splatting 🟦SfM Structure-from-Motion(运动恢复结构,简称 SfM)是一种计算机视觉技术,可以: 利用多张从不同角度拍摄的图像,恢复出场景的三维结构和相机的…...
主成分分析基本概念及python代码使用
目录 1. 前言 2. 主成分分析的基本概念 3. PCA的适应场景 4. PCA算法的理论基础 4.1 标准化数据 4.2 计算协方差矩阵 4.3 求解特征值和特征向量 4.4 选择主成分 4.5 投影到新坐标系 5. 完整的PCA示例 5.1 使用手写数字数据集 5.2 可视化降维后的数据 6. PCA的优缺…...
MCP如何助力智能交通系统?从数据融合到精准决策
MCP如何助力智能交通系统?从数据融合到精准决策 近年来,智能交通系统(ITS)正在全球范围内快速发展,它结合人工智能(AI)、物联网(IoT)和数据分析,致力于提高交通效率、减少拥堵、增强安全性。而MCP(Multi-Constraint Pathfinding,多约束路径寻优)技术作为一种复杂…...
什么是抽象类?是所有函数都是纯虚函数吗?
什么是抽象类? 抽象类(Abstract Class)是一种特殊的类,它不能被直接实例化,但可以作为基类被其他类继承。抽象类的主要用途是定义一组接口规范,这些规范由派生类实现。 在C中,抽象类是通过包含…...
计算机视觉与深度学习 | Python实现ARIMA-WOA-CNN-LSTM时间序列预测(完整源码和数据
以下是一个结合ARIMA、鲸鱼优化算法(WOA)、CNN和LSTM进行时间序列预测的Python实现框架。由于完整代码和数据量较大,此处提供核心代码结构和示例数据集,您可根据需求扩展。 1. 数据准备(示例数据) 使用airline-passengers.csv(航空乘客数据集): import pandas as pd…...

【Unity实战笔记】第二十四 · 使用 SMB+Animator 实现基础战斗系统
转载请注明出处:🔗https://blog.csdn.net/weixin_44013533/article/details/146409453 作者:CSDN|Ringleader| 1 结构 1.1 状态机 1.2 SMB 2 代码实现 2.1 核心控制 Player_Base_SMB 继承 StateMachineBehaviour ,控制变量初始…...
C/C++的OpenCV 进行图像梯度提取
使用 C/OpenCV 进行图像梯度提取 图像梯度表示图像中像素强度的变化率和方向。它是图像分析中的一个基本概念,广泛应用于边缘检测、特征提取和物体识别等任务。OpenCV 提供了多种计算图像梯度的函数。本文将介绍几种常用的梯度算子及其在 C/OpenCV 中的实现。 预备…...
Redis 缓存使用的BigKey问题
一、什么是 BigKey? BigKey 指在 Redis 中存储的 单个 Key 对应的 Value 过大,通常表现为: String 类型:Value 长度 > 10KB。Hash/List/Set/ZSet:元素数量 > 5,000 或总大小 > 10MB。 二、BigKey 的危害 问…...

【Java高阶面经:消息队列篇】22、消息队列核心应用:高并发场景下的解耦、异步与削峰
一、消息队列:分布式系统的核心枢纽 在分布式架构日益普及的今天,消息队列(Message Queue, MQ)已成为解决系统复杂性的核心组件。它通过异步通信、系统解耦和流量控制等能力,有效应对高并发场景下的数据流动挑战。 1.1 核心特性:异步、解耦与弹性 1.1.1 异步通信:释放…...

软媒魔方——一款集合多种系统辅助组件的软件
停更4年,但依旧吊炸天! 亲们,是不是觉得电脑用久了就像老牛拉车,慢得让人着急?别急,我今天要给大家安利一个超好用的电脑优化神器——软媒魔方! 软件介绍 首先,这货真心是免费的&a…...
Unity场景的加载与卸载
Unity场景的加载与卸载 使用方法:把SceneLoader 脚本代码挂在场景中 使用示例: SceneLoader.Instance.LoadAdditiveScene(8);//通过场景索引加载SceneLoader.Instance.UnloadScene("ShiWaiScene");//通过场景名字卸载脚本代码如下࿱…...

多路径可靠传输协议(比如 MPTCP)为什么低效
可靠就不能多路径,多路径求可靠必然要多费劲。这不难理解,多路径必异步,这无疑增加了可靠性判断的难度。 前文 多路径传输(比如 MPTCP)对性能的意义 阐述了作为单连接的多子流 MPTCP 对传输性能的意义是无意义,本文接着阐述作为隧…...

塔能高温冰蓄冷技术:工厂能耗精准节能的创新之路
在工厂的能耗构成中,制冷系统是重要的耗能环节。传统的水蓄冷和冰蓄冷技术在实际应用中存在一些局限性,难以满足工厂对节能和成本控制的更高要求。塔能科技的高温冰蓄冷技术,凭借其独特的优势,为工厂能耗精准节能提供了创新的解决…...

内存优化笔记1
欢迎关注更多精彩 关注我,学习常用算法与数据结构,一题多解,降维打击。 问题提出 在很多工业软件中,需要对对象进行微分细化,这样会产生很多(几百万到几千万)对象。随着业务的发展,…...

人脸识别,使用 deepface + api + flask, 改写 + 调试
1. 起因, 目的, 感受: github deepface 这个项目写的很好, 继续研究使用这个项目,改写 api。增加一个前端 flask app 2. 先看效果 3. 过程: 大力改写原始项目中 api 这部分的代码, 原始项目的文件结构太繁杂了: 我把…...

代码管理平台Gitlab如何通过快解析实现远程访问?
一、Gitlab功能介绍 Gitlab是被广泛使用的基于git的开源代码管理平台,用于管理、存储开发人员代码,同时可以协同开发 二、外网试用Gitlab遇到的问题 运维人员将Gitlab服务器部署在总部机房,而分公司开发人员和出差运维人员就无法访问Gitlab…...

基于SpringBoot+Vue的足球青训俱乐部管理后台系统的设计与开发
项目背景与概述 随着足球青训行业的快速发展,如何高效、规范地管理学员、教练以及课程等日常工作,成为了青训俱乐部运营的重要课题。为了提升俱乐部的管理效率与用户体验,基于 Spring Boot 和 Vue.js 开发了一个 足球青训俱乐部管理后台系统…...
Redis 是否适合像 MySQL 一样当数据库使用?
Redis 可以在特定场景下作为数据库使用,但与 MySQL 等关系型数据库还是有很大的差异。Redis 确实有持久化功能,开启 AOF 并把 appendfsync 设置为 always 后,它会把每一次数据操作都立刻记录到文件里,相当于每发生一件事就马上记下…...
AI是否会取代人类?浔川问答①
提问者:浔川社团官方联合会 回答者:deepseek 关于AI是否会取代人类的问题,目前科技界和社会学界的主流观点认为:AI会在许多领域显著改变人类的工作和生活方式,但“完全取代人类”的可能性极低。更可能的是人机协作的深…...
JDBC-java操作数据库
1.基本结构: package com.atguigu.servlets;import java.sql.Connection; import java.sql.DriverManager; import java.sql.Statement;public class JDBCemo {public static void main(String[] args) throws Exception{String url "jdbc:mysql:///mysql&qu…...
[原创](现代Delphi 12指南):[macOS 64bit App开发]: 如何获取目录大小?
[作者] 常用网名: 猪头三 出生日期: 1981.XX.XX 企鹅交流: 643439947 个人网站: 80x86汇编小站 编程生涯: 2001年~至今[共24年] 职业生涯: 22年 开发语言: C/C++、80x86ASM、Object Pascal、Objective-C、C#、R、Python、PHP、Perl、 开发工具: Visual Studio、Delphi、XCode、…...

线程调度与单例模式:wait、notify与懒汉模式解析
一.wait 和 notify(等待 和 通知) 引入 wait notify 就是为了能够从应用层面,干预到多个不同线程代码的执行顺序,可以让后执行的线程主动放弃被调度的机会,等先执行的线程完成后通知放弃调度的线程重新执行。 自助取…...

MySQL中TCP和套接字SSL加密连接行为分析
目录 一、前言 二、背景 三、参数介绍 3.1、 have_openssl 3.2、have_ssl 3.3、require_secure_transport 四、--ssl-modemode 五、CREATE USER SSL/TLS选项 六、问题验证 6.1、使用套接字连接 6.2、使用TCP连接 七、分析与总结 一、前言 SSL(Secure S…...

php本地 curl 请求证书问题解决
错误: cURL error 60: SSL certificate problem: unable to get local issuer certificate (see https://curl.haxx.se/libcurl/c/libcurl-errors.html) for 解决方案 在php目录下创建证书文件夹, 执行下面生成命令, 然后在php.ini 文件中配置证书路径; 重启环境 curl --eta…...
Callable
一、Callable 接口定义 FunctionalInterface public interface Callable<V> {V call() throws Exception; // 返回类型为泛型V,可抛出异常 }二、基本使用步骤 1. 定义 Callable 任务 // 示例1:计算两个数的和 Callable<Integer> sumTask …...
Honeywell 05701-A-0302 单通道控制卡
Honeywell 05701-A-0302 是System 57系列中的单通道控制卡,专为工业气体检测和火灾报警系统设计。该控制卡为系统提供单个检测通道的完整控制解决方案,包括传感器驱动、信号采集和报警管理功能。 主要特性 单通道控制:支持单个气体传感器或火…...

爱普生晶振赋能UWB汽车数字钥匙,解锁未来出行新方式
随着科技的发展,尤其是国产新能源汽车的崛起,相信大家对数字钥匙的概念已经不陌生了,通过手机、智能穿戴实现对汽车的多功能控制已经是很多汽车的标配。但是目前数字钥匙也有一定的局限性,比如定位不准、安全性不强等等࿰…...

电子电路:深入理解电磁耦合的定义与应用
电场和磁场是独立存在的吗?,但实际上根据麦克斯韦理论,它们是同一现象的两个方面,通过变化相互产生。这时候需要强调时变场的重要性,以及静态场和动态场的区别。 通过电磁波的概念,说明电磁耦合如何导致电…...