首页  >  文章  >  数据库  >  MySQL如何在保证性能的情况下实现数据表的批量复制?

MySQL如何在保证性能的情况下实现数据表的批量复制?

DDD
DDD原创
2024-10-24 06:14:02900浏览

How Can Bulk Copying of DataTables Be Achieved in MySQL While Maintaining Performance?

使用 MySQLBulkLoader 批量复制数据表

问题

从 Microsoft SQL Server 过渡到 MySQL 时,如何批量复制数据表可以在不牺牲性能的情况下实现数据表的复制吗?

答案

虽然在插入数据之前避免写入 CSV 文件似乎很直观,但性能基准表明情况并非如此。使用 MySqlBulkLoader 类从 CSV 文件批量加载数据明显优于使用 MySqlDataAdapter 直接插入。

实现:

<code class="csharp">string tempCsvFileSpec = @"C:\Users\Gord\Desktop\dump.csv";

using (StreamWriter writer = new StreamWriter(tempCsvFileSpec))
{
    Rfc4180Writer.WriteDataTable(rawData, writer, false);
}

var msbl = new MySqlBulkLoader(conn);
msbl.TableName = "testtable";
msbl.FileName = tempCsvFileSpec;
msbl.FieldTerminator = ",";
msbl.FieldQuotationCharacter = '"';
msbl.Load();

System.IO.File.Delete(tempCsvFileSpec);</code>

此代码将 DataTable 转储到临时 CSV 文件,批量加载数据,然后删除该文件。基准测试表明,这种方法只需要 5-6 秒,包括文件 I/O 操作的时间。相比之下,使用 MySqlDataAdapter 直接插入大约需要 30 秒。

以上是MySQL如何在保证性能的情况下实现数据表的批量复制?的详细内容。更多信息请关注PHP中文网其他相关文章!

声明:
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn