Duplicate có thể là một vấn đề lớn khi chúng có thể làm giảm hiệu suất và lãng phí bộ nhớ.
Sau đây là một vài cách để loại bỏ chúng:
Loại bỏ duplicate sử dụng từ khóa DISTINCT
Một trong những cách đơn giản nhất là sử dụng từ khóa DISTINCT. Bạn có thể sử dụng nó với câu lệnh SELECT để nhận về những giá trị duy nhất của một column.
Cú pháp:
1 2 3 | <span class="token keyword">SELECT</span> <span class="token keyword">DISTINCT</span> column_name <span class="token keyword">FROM</span> table_name |
Loại bỏ duplicate sử dụng câu lệnh GROUP BY
Một cách khác để loại bỏ duplicate là sử dụng câu lệnh GROUP BY. Nó được dùng để nhóm các hàng có cùng giá trị trong column, do đó nó thường đi với các hàm tổng hợp như COUNT(), SUM(), AVG(), MAX(), MIN() để tính toán cho từng nhóm.
Ở đây ta chỉ dùng GROUP BY cho mục đích loại bỏ duplicate trong một column nên cú pháp sẽ là:
1 2 3 4 | <span class="token keyword">SELECT</span> column_name <span class="token keyword">FROM</span> table_name <span class="token keyword">GROUP</span> <span class="token keyword">BY</span> column_name |
Loại bỏ duplicate sử dụng câu lệnh INNER JOIN
Câu lệnh INNER JOIN thường dùng để combine các hàng từ hai hoặc nhiều bảng dựa trên column chung giữa chúng để truy vấn thông tin. Bằng cách sử dụng INNER JOIN cho chỉ một bảng, ta có thể loại bỏ duplicate.
Cú pháp:
1 2 3 4 5 | <span class="token keyword">SELECT</span> a<span class="token punctuation">.</span>column_name <span class="token keyword">FROM</span> table_name a <span class="token keyword">INNER</span> <span class="token keyword">JOIN</span> table_name b <span class="token keyword">ON</span> a<span class="token punctuation">.</span>column_name <span class="token operator">=</span> b<span class="token punctuation">.</span>column_name <span class="token keyword">WHERE</span> a<span class="token punctuation">.</span>primary_key <span class="token operator">></span> b<span class="token punctuation">.</span>primary_key |
Ví dụ ta có bảng employees với 3 cột “employee_id”, “employee_name” và “department_id”. Ta sẽ loại bỏ duplicate trong cột department_id như sau:
1 2 3 4 5 | <span class="token keyword">SELECT</span> a<span class="token punctuation">.</span>department_id <span class="token keyword">FROM</span> employees a <span class="token keyword">INNER</span> <span class="token keyword">JOIN</span> employees b <span class="token keyword">ON</span> a<span class="token punctuation">.</span>department_id <span class="token operator">=</span> b<span class="token punctuation">.</span>department_id <span class="token keyword">WHERE</span> a<span class="token punctuation">.</span>employee_id <span class="token operator">></span> b<span class="token punctuation">.</span>employee_id |
Kết luận
Remember to always make a backup of your data before modifying it to avoid any potential data loss.
Source: https://www.freecodecamp.org/news/how-to-remove-duplicate-data-in-sql/