SQL Server에서 완전히 동일한 레코드 건너 뛰기

Question

C#에서 SqBulkCopy를 통해 SQL Server로 가져 오는 텍스트 파일 집합이 있습니다. 여러 레코드에 나타나는 일부 레코드가 있으며 오류를 던지고 중지하는 대신 해당 레코드를 건너 뛰고 싶습니다.

'고유 ID'/ 기본 키가있는 경우 모두 양호합니다. 'WITH (IGNORE_DUP_KEY = ON)'을 사용하여 효과를 나타 냈습니다.

이 경우에도 uniqueID를 결정할 수 없으며 모든 필드를 함께 결합하지 않거나 모든 필드를 포함하는 복합 키를 만들지 않습니다. 고유 한 transactionID 또는 비슷한 것을 얻으려고했지만 아무 것도 사용할 수 없습니다. 때때로 레코드는 동일하지만 필드의 한 자릿수가 변경되었습니다. 이 경우 테이블에 삽입하고 싶습니다.

모든 필드에 대해 키를 만드는 것보다 더 좋은 방법이있을 수 있습니다. 내가 그렇게했다면 날짜, 문자열, 값 등이 모두 키를 형성하기 위해 섞여 있어야한다는 것을 의미합니다.

밖으로 행을 쿼리 내 입력 라인의 해시와 비교를 위해 해시 값은 다른 생각을했지만, 성능은 내가 :)

누구나 가장이 작업을 수행하는 방법에 대한 제안을 확신 끔찍한 것입니까?

감사

Answer 1

당신은 제외하고 사용할 수 있습니다 : 속는이 일어나는 경우

insert into TargetTable 
select fieldlist from SourceTable 
except 
select fieldlist from TargetTable; 

Answer 2

가져 오는 경우에, 당신은 당신의 목표 테이블과 동일한 스키마를 가지고 임시 테이블에 삽입 한 다음에 SELECT DISTINCT 쿼리를 실행하여 데이터를 드 - 복제 무대를 만들 수 있습니다 이 쿼리의 결과를 최종 대상 테이블에 삽입합니다. 수천만 개의 행에 대해 이야기하지 않는 한, 이것은 단지 한 번 실행되어야하기 때문에 정상적으로 작동합니다.