대규모 MySQL 데이터베이스에서 중복 항목을 효율적으로 제거하려면 어떻게 해야 합니까?

대규모 MySQL 데이터베이스에서 중복 항목을 효율적으로 제거

중복 항목으로 인해 문제가 있는 대규모 MySQL 데이터베이스는 심각한 골칫거리가 될 수 있습니다. 이 문제를 신속하게 해결하려면 특히 수백만 행을 초과하는 데이터베이스의 경우 쿼리 실행 시간 최적화가 중요합니다.

이를 달성하려면 다음 접근 방식을 활용할 수 있습니다.

1. 임시 테이블 생성: 원본 테이블과 구조가 동일한 새 테이블(tmp)을 생성합니다. (yourtable).
2. 고유 인덱스 추가: 고유성을 정의하는 열(예: text1 및 text2)에 고유 인덱스를 포함하도록 tmp 테이블을 변경합니다.
3. 대량 삽입: ON DUPLICATE KEY UPDATE 절을 사용하여 테이블의 모든 레코드를 tmp에 삽입합니다. 이 절을 사용하면 각각의 개별 text1 및 text2 조합의 첫 번째 인스턴스만 삽입되어 text3 열이 null이 아닌 값으로 업데이트됩니다.
4. 테이블 이름 바꾸기 스왑: 테이블 이름을 deleteme로 바꾸고 tmp를 테이블로 보내세요. 이 단계는 원본 테이블을 중복 제거된 버전으로 효과적으로 대체합니다.
5. 중복 테이블 삭제: deleteme 테이블을 삭제하여 공간을 확보합니다.

이 접근 방식은 다음을 제공합니다. GROUP BY, DISTINCT 또는 하위 쿼리를 사용하는 방법에 비해 성능이 크게 향상됩니다. 단일 작업으로 모든 레코드를 정렬하고 집계할 필요가 없으므로 쿼리 실행 시간이 최소화됩니다.

샘플 코드:

CREATE TABLE tmp LIKE yourtable;

ALTER TABLE tmp ADD UNIQUE (text1, text2);

INSERT INTO tmp SELECT * FROM yourtable 
ON DUPLICATE KEY UPDATE text3 = IFNULL(text3, VALUES(text3));

RENAME TABLE yourtable TO deleteme, tmp TO yourtable;

DROP TABLE deleteme;

이 기술을 구현하면 필요한 시간을 크게 줄일 수 있습니다. 대규모 데이터베이스에서 중복 항목을 제거하여 데이터 무결성과 성능 효율성을 보장합니다.

위 내용은 대규모 MySQL 데이터베이스에서 중복 항목을 효율적으로 제거하려면 어떻게 해야 합니까?의 상세 내용입니다. 자세한 내용은 PHP 중국어 웹사이트의 기타 관련 기사를 참조하세요!