성능을 유지하면서 MySQL에서 DataTable의 대량 복사를 어떻게 달성할 수 있습니까?

DDD
풀어 주다: 2024-10-24 06:14:02
원래의
903명이 탐색했습니다.

How Can Bulk Copying of DataTables Be Achieved in MySQL While Maintaining Performance?

MySQLBulkLoader를 사용하여 데이터 테이블 대량 복사

질문

Microsoft SQL Server에서 MySQL로 전환할 때 대량 복사를 수행하려면 어떻게 해야 합니까? 성능 저하 없이 DataTable을 복사할 수 있습니까?

답변

데이터를 삽입하기 전에 CSV 파일에 쓰지 않는 것이 직관적으로 보일 수 있지만 성능 벤치마크에서는 그렇지 않음을 나타냅니다. MySqlBulkLoader 클래스를 사용하여 CSV 파일에서 데이터를 대량 로드하는 것은 MySqlDataAdapter를 사용한 직접 삽입보다 성능이 훨씬 뛰어납니다.

구현:

<code class="csharp">string tempCsvFileSpec = @"C:\Users\Gord\Desktop\dump.csv";

using (StreamWriter writer = new StreamWriter(tempCsvFileSpec))
{
    Rfc4180Writer.WriteDataTable(rawData, writer, false);
}

var msbl = new MySqlBulkLoader(conn);
msbl.TableName = "testtable";
msbl.FileName = tempCsvFileSpec;
msbl.FieldTerminator = ",";
msbl.FieldQuotationCharacter = '"';
msbl.Load();

System.IO.File.Delete(tempCsvFileSpec);</code>
로그인 후 복사

이 코드는 DataTable을 임시 CSV 파일을 생성하고 데이터를 대량 로드한 다음 파일을 삭제합니다. 벤치마킹에 따르면 이 접근 방식은 파일 I/O 작업 시간을 포함하여 5~6초밖에 걸리지 않습니다. 반면 MySqlDataAdapter를 사용한 직접 삽입에는 약 30초가 소요됩니다.

위 내용은 성능을 유지하면서 MySQL에서 DataTable의 대량 복사를 어떻게 달성할 수 있습니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!

원천:php
본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
인기 튜토리얼
더>
최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿