c#自带压缩类实现数据库表导出到CSV压缩文件的方法

原文:c#自带压缩类实现数据库表导出到CSV压缩文件的方法

在导出大量CSV数据的时候，常常体积较大，采用C#自带的压缩类，可以方便的实现该功能，并且压缩比例很高，该方法在我的开源工具DataPie中已经经过实践检验。我的上一篇博客《功能齐全、效率一流的免费开源数据库导入导出工具（c#开发，支持SQL server、SQLite、ACCESS三种数据库），每月借此处理数据5G以上》中有该工具的完整源码，有需要的同学可以看看。

在.net 4.5中,可以轻松创建zip文件，首先需要引入 System.IO.Compression.dll、System.IO.Compression.FileSystem.dll两个文件。其中ZipArchive 类表示一些压缩使用 Zip 文件格式的文件。ZipArchiveEntry 类表示单个 ZipArchive。ZipArchive 通常包含一个或多个 ZipArchiveEntry 实例。

DataPie中实现csv文件压缩导出的主要代码如下：

using System;
using System.Linq;
using System.Text;
using System.IO.Compression;
using System.Data;
using System.Diagnostics;
using System.IO;namespace DataPie.Core
{public class DBToZip{public static int DataReaderToZip(String zipFileName, IDataReader reader, string tablename){Stopwatch watch = Stopwatch.StartNew();watch.Start();using (FileStream fsOutput = new FileStream(zipFileName, FileMode.OpenOrCreate, FileAccess.ReadWrite)){using (ZipArchive archive = new ZipArchive(fsOutput, ZipArchiveMode.Update)){ZipArchiveEntry readmeEntry = archive.CreateEntry(tablename + ".csv");using (StreamWriter writer = new StreamWriter(readmeEntry.Open(), Encoding.UTF8)){for (int i = 0; i < reader.FieldCount; i++){if (i > 0)writer.Write(',');writer.Write(reader.GetName(i) );}writer.Write(Environment.NewLine);while (reader.Read()){for (int i = 0; i < reader.FieldCount; i++){if (i > 0)writer.Write(',');String v = reader[i].ToString();if (v.Contains(',') || v.Contains('\n') || v.Contains('\r') || v.Contains('"')){writer.Write('"');writer.Write(v.Replace("\"", "\"\""));writer.Write('"');}else{writer.Write(v);}}writer.Write(Environment.NewLine);}}}}watch.Stop();return Convert.ToInt32(watch.ElapsedMilliseconds / 1000);}}
}

c#自带压缩类实现数据库表导出到CSV压缩文件的方法相关推荐

python亿级mysql数据库导出_Python实现将MySQL数据库表中的数据导出生成csv格式文件的方法...
本文实例讲述了python实现将MySQL数据库表中的数据导出生成csv格式文件的方法.分享给大家供大家参考,具体如下: #!/usr/bin/env python # -*- coding:utf- ...
Oracle数据库表导出和导入csv文件操作
Oracle数据库表导出和导入csv文件操作数据库是Oracle 9i 1.导出csv文件这个十分简单,用pl/sql工具即可,首先选中要导出的表,右键选择Query data,在左侧出现的窗口中 ...
根据实体类生成数据库表
参考文档地址:通过实体类生成数据库表_weixin_44571808的博客-CSDN博客_java实体类生成数据库表注意springboot版本号需要比较低(没有详细测试2.6不行,2.1.11可以 ...
PostgreSQL将表导出为CSV（服务器端、客户机端）完整版
如下使用COPY命令可将表内容导出到CSV文件. COPY (select id as COL_ID, name as COL_NAME from my_tab order by id) to 'D: ...
python读取数据库数据、并保存为docx_Python从数据库读取大量数据批量写入文件的方法...
Python从数据库读取大量数据批量写入文件的方法使用机器学习训练数据时,如果数据量较大可能我们不能够一次性将数据加载进内存,这时我们需要将数据进行预处理,分批次加载进内存. 下面是代码作用是将数据 ...
java 导出csv 格式,java导出csv格式文件的方法
这篇文章主要为大家详细介绍了java导出csv格式文件的方法,文中示例代码介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们可以参考一下导出csv格式文件的本质是导出以逗号为分隔的文本数据 imp ...
Python从数据库读取大量数据批量写入文件的方法
今天小编就为大家分享一篇Python从数据库读取大量数据批量写入文件的方法,具有很好的参考价值,希望对大家有所帮助.一起跟随小编过来看看吧使用机器学习训练数据时,如果数据量较大可能我们不能够一次性将 ...
oracle数据库listener开启和关闭trace文件的方法
linux下监听文件listener.ora在哪一般在 $ORACLE_HOME/network/admin下面可以用find 命令找一下:find $ORACLE_BASE -name list ...
python批量读取文件内容_Python从数据库读取大量数据批量写入文件的方法
使用机器学习训练数据时,如果数据量较大可能我们不能够一次性将数据加载进内存,这时我们需要将数据进行预处理,分批次加载进内存. 下面是代码作用是将数据从数据库读取出来分批次写入txt文本文件,方便我们做 ...

c#自带压缩类实现数据库表导出到CSV压缩文件的方法

c#自带压缩类实现数据库表导出到CSV压缩文件的方法相关推荐

最新文章

热门文章