VB.Net의 SQLite db로 Excel 데이터를 가져 오는 효율적인 방법

Question

SQLite 백엔드에 데이터를 저장하는 VB.Net 응용 프로그램을 만들고 있습니다. 데이터는 사용자가 가져올 수있는 Excel 워크 북으로 제공됩니다. 각 통합 문서에는 하나의 워크 시트 (약 30,000 개의 행)가 있으며이 테이블은 조금씩 수정되어 새 테이블로 가져옵니다. 이 작업을 수행하는 가장 효율적인 방법은 무엇입니까?

저는 현재 Excel에서 2D 배열로 전체 범위를 읽고 있습니다. 이 배열의 행을 반복하고 각 행을 매 1,000 행마다 실행되는 긴 SQL 문에 추가합니다. 하지만이 작업은 배열 비트를 반복하면서 SQLite 단계로 진행하는 데 어려움을 겪습니다. 나는 이것을 할 수있는보다 효율적인 수단이 있어야한다고 생각하지만 도움을 줄 수는 없다.

감사합니다, 아래

코드 : '먼저 XLS의 reformater 책을 열고 우리의 데이터 Excel.Worksheet으로

Excel.Workbook 희미한 xlWorkSheet으로 새로운이 Excel.Application 희미한 xlWorkBook으로 희미한 xlApp 읽어

xlWorkBook = xlApp.Workbooks.Open(strFile) 
    xlWorkSheet = xlWorkBook.Worksheets("ToDSS") 

    Dim r As Excel.Range = xlWorkSheet.UsedRange 
    Dim array(,) As Object = r.Value(Excel.XlRangeValueDataType.xlRangeValueDefault) 

    xlWorkBook.Close() 
    xlApp.Quit() 

    releaseObject(xlApp) 
    releaseObject(xlWorkBook) 
    releaseObject(xlWorkSheet) 

    SQLconnect.Open() 
    SQLcommand = SQLconnect.CreateCommand 

    'now loop through the rows inserting each into the db 

    Dim curDate As Date 

    strSQL = "" 
    Dim batch As Integer = 0 

    For row As Integer = 16 To array.GetUpperBound(0) 
     strSQL += "INSERT INTO scenario_" & strScenarioName & " VALUES ('" 
     curDate = array(row, 1) 
     strSQL += curDate.ToString("yyyy'-'MM'-'dd") + "'" 

     For col = 2 To 30 
      strSQL += ", " & array(row, col) 

     Next 
     strSQL += ");" & vbCrLf 

     If batch > 1000 Or row = array.GetUpperBound(0) Then 
      Debug.Print(Str(row)) 
      SQLcommand.CommandText = strSQL 
      SQLcommand.ExecuteNonQuery() 
      Debug.Print("pushed") 
      strSQL = "" 
      batch = 0 
     Else 
      batch += 1 
     End If 

    Next 
    SQLcommand.Dispose() 
    SQLconnect.Close() 

Answer 1

CSV 형식으로 내보내고 대량로드를 사용합니다.

Answer 2

아마도 약간 둥근 정도지만 Excel 대신 Access로 파일을 가져온 다음 SQLite로 내보낼 수 있습니다.

SQLite는 대한 ODBC 드라이버가있다 :

http://www.ch-werner.de/sqliteodbc/

당신이 SQLite는 Access에서 내보낼 수있는 사용. 다음은 GUI에서 수행하는 예제입니다. 내 기본 가정은 프로그래밍이 가능하거나 (아마도 VBA에서) 자동화 될 수 있습니다.

http://support.microsoft.com/kb/200427

나는 당신에게 최소한의 서식 옵션을 줄 것이다 가정하지만 그 일의 비교적 깨끗한 (즉시) 방법이 될 것이다. 드라이버는 오픈 소스이므로 C에서 충분히 능숙한 경우 확장 할 수 있습니다.