[MySQL][PHP] Usuwanie zduplikowanych wpisow Opcje

[Agape]

Mam w tabeli produkty z ich nazwami, do wgrywanych produktow robie dodatkowa kolumne `nazwa_unikalna` gdzie zapisuje tytul obciety do max 50 znakow. Nastepnie mam cos takiego w uproszczeniu:

[PHP] pobierz, plaintext 
		$produkty_unikalne = array();
		foreach ($produkty as $produkty_){
			if(in_array($produkty_['nazwa_unikalna'], $produkty_unikalne)){
				//jezeli produkt o takiej nazwie juz wystepowal, usuwaj powielony
			}else{
				//zbieraj unikalne do porownania
				$produkty_unikalne[] = $produkty_['nazwa_unikalna'];
			}			
		}
[PHP] pobierz, plaintext 

czyli jezeli napotka drugi i kolejny produkt ktory ma taka sama nazwe unikalna, to usuwa go zeby nie bylo takich samych poduktow w bazie. Problem w tym ze baza ma pareset tysiecy rekordow i funkcja ta wykonuje sie pare minut, czym wiecej produktow przerobi tym bardziej zwalnia. Potrzebuje ja zastapic poleceniem sql, zeby zostawialo pierwszy produkt z taka nazwa a usuwalo nastepne, niestety nie mam pojecia jak to zrobic :/

7 minut dokladnie wykonuje sie to zapytanie, jakbym zszedl do 2 byloby idealnie ...

Ten post edytował Agape 25.08.2016, 15:02:39

[Agape]

Panowie bardzo dziekuje wam za zainteresowanie tematem, znalazlem problem. Powyzszy skrypt wykonywal sie 7 min (ten na samej gorze). Zmienilem z in_array ktore jest bardzo wolne na isset ktore jest mega szybkie, ponizszy skrypt ktory robi to samo, a tylko jedna funkcja zostala zmieniona wykonuje sie w 1 sekunde !

[PHP] pobierz, plaintext 
		$produkty_unikalne = array();
		foreach ($produkty as $produkty_){
			if(isset($produkty_unikalne[$produkty_['nazwa_unikalna']])){
				//jezeli produkt o takiej nazwie juz wystepowal, usuwaj powielony
			}else{
				//zbieraj unikalne do porownania
				$produkty_unikalne[ $produkty_['nazwa_unikalna'] ] = 'x';
			}			
		}
[PHP] pobierz, plaintext 

chodzi na pewno o to ze in_array przeszukuje cala tablice (ponad 100 tys rekordow) a isset probuje odczytac pojedyncza wartosc, jesli jest git, jesli nie to juz nie szuka w tysiacach rekordow tylko zwraca ze nie ma. Nie wiedzialem ze jest az taka roznica