.NET에서 SQL Server로 수백만 개의 레코드를 효율적으로 스트리밍하는 방법

Question

한 번에 수백만 개의 레코드를 처리 한 다음 플랫 파일이나 SQL Server 데이터베이스에 저장하는 C# .NET 프로그램이 있습니다.

현재 SQL Server 데이터베이스에 저장하기 위해 프로그램은 모든 레코드를 플랫 파일에 기록한 다음 bcp를 사용하여 SQL Server로 가져옵니다.

SQL로 가져 오기 전에 모든 레코드를 하드 디스크에 쓰지 않아도되는보다 효율적인 방법이 있습니까?

Answer 1

System.Data.SqlClient 네임 스페이스의 SqlBulkCopy 클래스를 사용해보십시오. 이처럼 사용할 수 있습니다 다음 WriteToServer 방법은 오버로드와 3 개의 PARAM 데이터 형식을 받아 들일 것입니다

using (var conn = new SqlConnection(connectionString)) 
using (var bulkCopy = new SqlBulkCopy(conn)) 
{ 
    conn.Open(); 
    { 
     bulkCopy.DestinationTableName = "dbo.MyTable"; 
     DataTable dt = BuildMyData(); 
     try 
     { 
      bulkCopy.WriteToServer(dt); 
     } 
     catch (Exception ex){Console.WriteLine(ex.Message);} 
    } 
} 

:

• DataRow[]
• DataTable
• IDataReader