Usuwanie duplikatów z 1,6mln rekordów Opcje

[1q2w3e4r]

Witam,
Muszę usunąć duplikaty z 1,6mln rekordów.. Zastanawiam się jak to zrobić najszybciej.
Duplikaty mają się usuwać wierszami, czyli duplikaty jeśli jeden wiersz nie może się równać innemu.

Macie jakieś propozycje jak to zrobić?

Proszę o szybka odpowiedź.

[cudny]

wersja z php ma pewna zaletę ze możesz dowolnie filtrować te wyniki

[PHP] pobierz, plaintext 
$query = mysql_query('SELECT * FROM tab ORDER BY wiersz DESC');//ważne zęby były posortowane wyniki
$i=0;
while ($row = mysql_fetch_array($query)) {
if ($i > 0)//pomijamy 1 wiersz :)
{
if ($p == $row['wiersz'])//tu dowone sprawdzanie tego wiersza
mysql_query('DELETE FROM tab WHERE id = '.$row['id']);
}
$p = $row['wiersz'];
$i++;    
}
[PHP] pobierz, plaintext 

i jesli tylko jest index na tym co chcesz sprawdzac to wykonanie tego kodu to kilka sekund (IMG:style_emoticons/default/smile.gif)

Nie obraź się ale to co napisałeś to totalna bzdura i nieporozumienie (IMG:style_emoticons/default/biggrin.gif)

Co do samego rozwiązania problemu to są dwie opcje (tym bardziej, że z tego co piszesz to jednorazowe rozwiązanie, więc ja bym się zbytnio nad wydajnością nie zastanawiał - ma zadziałać, a sql bajecznie szybko radzi sobie z dużymi ilościami rekordów):

Albo robisz to co cojack i alegorn napisali (wszytko jedno co (IMG:style_emoticons/default/smile.gif) ) albo sprawdź czy parser mysql pozwoli na cos takiego:

[SQL] pobierz, plaintext 
DELETE FROM db WHERE id NOT IN(SELECT id FROM db GROUP BY kolumna_ktora_sie_bedzie_powtarzac)
[SQL] pobierz, plaintext