 Usuwanie duplikatów z 1,6mln rekordów |
| Usuwanie duplikatów z 1,6mln rekordów |
Post
#1
|
|
|
Grupa: Zarejestrowani Postów: 238 Pomógł: 0 Dołączył: 6.05.2011 Ostrzeżenie: (10%) 
 |
Witam,
Muszę usunąć duplikaty z 1,6mln rekordów.. Zastanawiam się jak to zrobić najszybciej. Duplikaty mają się usuwać wierszami, czyli duplikaty jeśli jeden wiersz nie może się równać innemu. Macie jakieś propozycje jak to zrobić? Proszę o szybka odpowiedź. |
 |
 
|
 |
|
Post
#2
|
|
|
Grupa: Zarejestrowani Postów: 341 Pomógł: 40 Dołączył: 23.06.2009 Ostrzeżenie: (0%) 
|
toniq:: kilka sekund?? dyskusyjne. no ale nawet gdyby, to czy zastanawiales sie jak po takiej operacji wyglada index?
ser szwajcarski przy nim to malo... i to taki duuuzy ser (IMG:style_emoticons/default/wink.gif) jasne ze to sie da zalatwic kolejnymi operacjami, ale...(IMG:style_emoticons/default/wink.gif) poza tym, wybranie tak okolo 1,6 kk rekordow, kazdy minimum z kilkoma, albo kilkunastu polami... wyobrazasz sobie ile to pamieci potrzebuje? ja mam kilka baz - ktorych w taki sposob nie dasz rady zaczytac... wiec wprowadzasz w kolejnym kroku limitowanie...? a jak sie nie pogubisz w tym co juz pobrales a co nie? w sensie ze np. z pierwszej partii 1000 rekordow wywaliles np 100 pol, to czy pobierasz 'limit 1000,1000' czy tez 'limit ' . (1000 - $ilosc_usunietych) . ',1000' no, jasne ze da sie to napisac w phpie, ale stopien skomplikowania, i jakosc koncowa - pozostawia sporo do zyczenia (IMG:style_emoticons/default/smile.gif) j. ps swoja droga - masz 'ciekawy' styl pisania kodu.. poczytaj sobie o stylach kodowania - to zaprocentuje w przyszlosci (IMG:style_emoticons/default/smile.gif) << to rada, nie krytyka :] Ten post edytował alegorn 15.03.2012, 11:04:32 |
|
|
|
1q2w3e4r Usuwanie duplikatów z 1,6mln rekordów 13.03.2012, 17:57:54 
toniq pobierasz wszystkie posortowane po tym co chcesz
s... 13.03.2012, 18:35:55 1q2w3e4r Tak, ale to jest 1 600 000 rekordów, każdy przez k... 14.03.2012, 14:46:02 alegorn duplikaty? w sensie na caly rekord? czy na konkret... 14.03.2012, 15:05:59 cojack Z http://dev.mysql.com/doc/refman/5.0/en/delete.ht... 14.03.2012, 16:02:43 alegorn @cojak w zasadzie to tosamo co i ja zaproponowalem... 14.03.2012, 17:09:31 toniq wersja z php ma pewna zaletę ze możesz dowolnie fi... 15.03.2012, 08:00:12 
cudny Cytat(toniq @ 15.03.2012, 08:00:12 ) ... 15.03.2012, 21:48:11  |
|
Aktualny czas: 16.10.2025 - 09:01 |
