 Praca na dużych plikach tekstowych, analiza linia po linii, jak zrobić to możliwie najmniej zasobożernie? |
| Praca na dużych plikach tekstowych, analiza linia po linii, jak zrobić to możliwie najmniej zasobożernie? |
Post
#1
|
|
|
Grupa: Zarejestrowani Postów: 304 Pomógł: 0 Dołączył: 12.12.2006 Skąd: Pszów Ostrzeżenie: (0%) 
 |
Witam
Mam projekt w którym muszę przeanalizować duże pliki txt które są wgrywane przez formularz na stronę. Pliki trzeba analizować lina po linii. Pliki mogą mieć nawet po kilka MB. Jednocześnie takich analiz może zlecić kilkanaście osób. Jak to zrobić żeby mi serwer przez to nie padł? Jakaś skuteczna metoda? Można np połączyć z ajaxem i czytać po 100 linii, aż do końca pliku? może jakaś inna lepsza metoda? z góry dziękuje |
 |
 
|
 |
|
Post
#2
|
|
|
Grupa: Zarejestrowani Postów: 6 476 Pomógł: 1306 Dołączył: 6.08.2006 Skąd: Kraków Ostrzeżenie: (0%)
|
W przypadku zwykłego pliku tekstowego, nie ma bata, trzeba przelecieć cały plik od początku, sprawdzając znak po znaku czy nie natrafiliśmy aby przypadkiem na wartość odpowiadającą nowej linii (trzeba wziąć poprawkę na sposób zapisu pliku, czy będzie to \n, \r czy \r\n). Jest to więc rozwiązanie bardzo nieefektywne.
Dlaczego nie skorzystasz z bazy danych? |
|
|
|
Avatarus Praca na dużych plikach tekstowych, analiza linia po linii 5.04.2012, 19:07:34 
zegarek84 fgets...
plik wcześniej na serwer zostanie cały w... 5.04.2012, 21:00:12 Avatarus ok. ale pytanie, gdyby plik miał np 20MB to czy fg... 6.04.2012, 08:12:07 rocktech.pl Witam.
Zerknij tu SplFileObject. 6.04.2012, 08:17:50 Pilsener Przecież masz wszystko napisane z przykładami, w d... 6.04.2012, 08:42:32 Avatarus ok tylko jak w tym przykładzie odczytać z pliku kt... 7.04.2012, 11:10:36 Pilsener Fragment mojego tutoriala o obsłudze plików:
[PHP... 7.04.2012, 14:29:00 prowseed Albo stream_get_line albo tak jak @rocktech.pl nap... 7.04.2012, 14:37:48 
Avatarus Dzięki już to działa.
Korzystam z metody jaką wska... 7.04.2012, 17:15:39  |
|
Aktualny czas: 17.10.2025 - 07:42 |
