t1에서 새 테이블로 복사 t2 중복 행을 필터링합니다.

Question

테이블 t1이 있습니다. 일부 행에는 모든 열에 중복이 있습니다 (예 : id).
t1의 id은 AUTO_INCREMENT이고 1MIL 개의 행이 있습니다.

t2은 데이터가없는 새 테이블이며 id은 AUTO_INCREMENT가 필요하지 않습니다. 아마도이 필드에 대해 새 열을 생성 할 것입니다.

Q : 내가 t2 생성 한 후, 어떻게 t2가 중복 행

내가 아마존에 생각이 없다고 그래서, 모든 컬럼에 t1에서 t2 고유 한 값으로 t1에서 복사 할 수 있습니다 RDS ENGINE=InnoDB

t1 - 이것은 내가 가지고있는 것입니다.

+---+-----+-----+------+-------+ 
|id |fname|lname|mytext|morevar| 
|---|-----|-----|------|-------| 
| 1 | joe | min | abc | 123 | 
| 2 | joe | min | abc | 123 | 
| 3 | mar | kam | def | 789 | 
| 4 | kel | smi | ghi | 456 | 
+------------------------------+ 

T2 -이 내가이 내 시도

+---+-----+-----+------+-------+ 
|id |fname|lname|mytext|morevar| 
|---|-----|-----|------|-------| 
| 1 | joe | min | abc | 123 | 
| 3 | mar | kam | def | 789 | 
| 4 | kel | smi | ghi | 456 | 
+------------------------------+ 

로 끝날 싶은 것이 있습니다 만, 가지고 : Error Code: 1136. Column count doesn't match value count at row 1

INSERT INTO t2 (id,fname,lname,mytext,morevar) 
SELECT DISTINCT st.mytext 
FROM t1 st 
WHERE st.id>0 
AND st.id<=1000 

Answer 1

사용 GROUP BY 그냥 열이 구별 할 수 있습니다. 다른 열이 중복되는 경우마다 다를

INSERT INTO t2 (id,fname,lname,mytext,morevar) 
SELECT id, fname, lname, mytext, morevar 
FROM t1 st 
WHERE st.id>0 
AND st.id<=1000 
GROUP BY mytext 

그것은 임의로 그들로부터 값을 선택한다 (반드시 동일한 행 짝수 행).

Answer 2

가장 쉬운 방법은 group by를 사용하는 것입니다 : 열 값이 같은 행에서 오는 보장되지 않기 때문에

INSERT INTO t2 (id,fname,lname,mytext,morevar) 
    SELECT id,fname,lname,mytext,morevar 
    FROM t1 st 
    WHERE st.id>0 AND st.id<=1000 
    group by mytext; 

그러나, 기술적으로,이 올바르지 않습니다. 그래서, 올바른 방법은 다음과 같습니다

INSERT INTO t2 (id,fname,lname,mytext,morevar) 
    SELECT st.id, st.fname, st.lname, st.mytext, st.morevar 
    FROM t1 st join 
     (select mytext, min(id) as minid 
      from t1 
      group by mytext 
     ) mint 
     on st.id = minid 
    WHERE st.id>0 AND st.id<=1000 ; 

Answer 3

은 중복의 작은 ID 번호를 선택하고 계정에 모든 열을 소요됩니다,이 코드를 사용해보십시오.

INSERT INTO t2 (id,fname,lname,mytext,morevar) 
SELECT min(id) id, fname, lname, mytext, morevar 
FROM t1 
WHERE t1.id > 0 and t1.id <= 1000 
GROUP BY fname, lname, mytext, morevar 
ORDER BY id;