[php] Przebudwa skryptu importu, układ kolumn wg wskazania Opcje

[kukix]

Witam.

Potrzebuje przerobić skrypt importu plików csv.
W skrypcie ma być mołziwość wybierania, które kolumny majązostać zaimportowane i żeby można było zmieniać ich kolejnośc.

Jak zaplanowac taki skrypt? Macie jakieś pomysły?


np dostarczam do skryptu tablice

[PHP] pobierz, plaintext 
$importuj_dane[0] = 'pole_1';
$importuj_dane[1] = 'pole_5';
$importuj_dane[2] = 'pole_2';
$importuj_dane[3] = 'pole_9';
[PHP] pobierz, plaintext 

I jak teraz zaplanować import wg takiej kolejności i układu?

[aniolekx]

po co ta kolejność?

[kukix]

po co ta kolejność?

też wydaje mi sie, że jest to zbędna sprawa, ale jednak jest taki wymóg :/


w innym przypadku mógłbym przy każdym kolejnym polu danych dać warunek czy ma być brany pod uwage, czy nie, a tutaj zmiana kolejności i sprawa się komplikuje.

[Pyton_000]

To dowiedz się najpierw po co takie kombinacje i co ma być rezultatem, bo może nie potrzeba wcale kombinowania

[aniolekx]

W tych importach które ja najczęściej pisze to pierwszy wiersz jest wierszem zawierającym nagłówki, które identyfikują kolumny, kolumny najczęściej dzielą się na dwa typy wymagane i opcjonalne, wymagane to najczęściej te które w identyfikują dany wiersz, tworząc taki upload pojawia się kilka zachowań/scenariuszy, np. jak potraktować puste komórki, tzn czy maja czyścic dane w bazie, czy jednak maja być ignorowane, itp.

Ten post edytował aniolekx 17.03.2015, 09:56:08

[kukix]

czy nie można by zrobić listy funkcji

[PHP] pobierz, plaintext 
function kol_aaaa() { .. /* obsługas danej kolumny*/ return $kod_sql; } 
function kol_bbbb() { .. /* obsługas danej kolumny*/ return $kod_sql; } 
function kol_ccccc() { .. /* obsługas danej kolumny*/ return $kod_sql; } 
[PHP] pobierz, plaintext 

Następnie parsujemy dany plik i w zależności od potrzeby wywołujemy funkcje dla danej kolumny.
Każda funkcja może generować ostateczny kod dla bazy MySQL, którey sklepaj w całośc i wykonuje?

[Pyton_000]

można, potem call_user_function i lecisz, tylko czy to ma sens?

[kukix]

można, potem call_user_function i lecisz, tylko czy to ma sens?

Mechanizm ten bedzie odpalany stosunkowo rzadko, wiec nie musi być super wydajny.

Chodzi o to, że beda wrzucane różne pliki i za każdym razem trzebaby je modyfikowac, a tak mozna zrobic np dwa trzy gotowe ustawienia i odpada sporo pracy.

[memory]

Masz pliki z csv z rożnymi kolejnościami kolumn i musisz wrzucić je do bazy w jednej słusznej kolejności ?

[ctom]

Mechanizm ten bedzie odpalany stosunkowo rzadko, wiec nie musi być super wydajny.

Chodzi o to, że beda wrzucane różne pliki i za każdym razem trzebaby je modyfikowac, a tak mozna zrobic np dwa trzy gotowe ustawienia i odpada sporo pracy.

Kod

$csvArray = []; // zrzucone dane z pliku CSV do tablicy
$importuj = [1,5,2,9]; // zakładam, że to są indexy

$wynik = []; // wynik po przekonwertowaniu

array_map(function($row) use (&$wynik, $importuj) {
    $dane = array_map(function($i) use ($row){
        return isset($row[$i]) ? $row[$i] : null;
    }, $importuj);
    array_push($wynik, $dane);
}, $csvArray );

[kukix]

[code]$csvArray = []; // zrzucone dane z pliku CSV do tablicy
...

problemem jest to, że dla różnych kolumn trzeba czesto wykonywać różne operacje, które tylko dla danej kolumny wystepują :/



Przygotowałem następująca koncepcje, prosze o opinie

[PHP] pobierz, plaintext 
 
//ustalony porzadek kolumn - takie kolumny musi mieć też plik csv.
 
$uklad_kolumn[0] = 'NAZWA_KOLUMNYa';
$uklad_kolumn[1] = 'NAZWA_KOLUMNYc';
$uklad_kolumn[2] = 'NAZWA_KOLUMNYd';
$uklad_kolumn[3] = 'NAZWA_KOLUMNYb';
 
 
//funkcje dla każdej z mozliwych kolumn
//funkcje te zwracaja wycinek kodu sql, który na końcu pętli jest wykonywany
 
function kol_NAZWA_KOLUMNYa($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
function kol_NAZWA_KOLUMNYb($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
function kol_NAZWA_KOLUMNYc($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
function kol_NAZWA_KOLUMNYd($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
function kol_NAZWA_KOLUMNYe($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
function kol_NAZWA_KOLUMNYf($dane) { /*wykonujemy operacje*/ return $wycinek_sql; }
 
 
$uchwyt = fopen ($plik_csv,"r");
while (($data = fgetcsv($uchwyt, 6000, ";")) !== FALSE)  {
	$kod_sql = '';
 
	//rozpisujemy wszystkie kolumny
	foreach ($uklad_kolumn as $key => $value) {
 
		//wykonujemy funkcje o danej nazwie i przekazujemy jej jako parametr wartość danej kolumny
		$kod_sql .= call_user_func( 'kol_'.$value , $data[ $key ] );
 
	}
 
	sql(" WYKONUJEMY POSKŁADANE ZAPYTANIE $kod_sql ");
}
 
[PHP] pobierz, plaintext 

Ten post edytował kukix 31.03.2015, 17:46:54

[Pyton_000]

Jeśli nie masz dla wszystkich kolumn funkcji to musisz sprawdzać czy masz taką metodę ew. napisać uniwersjalną metodę __call() która będzie odpalana w przypadku braku funkcji.

[kukix]

a wybiered

Jeśli nie masz dla wszystkich kolumn funkcji to musisz sprawdzać czy masz taką metodę ew. napisać uniwersjalną metodę __call() która będzie odpalana w przypadku braku funkcji.

Braku funkcji nie przewiduje, ponieważ będą wybierane z listy, ale z czasem dorobie jakies zabezpieczenie.