 Jak przesłać na FTP dużą ilość małych plików?, szybko |
| Jak przesłać na FTP dużą ilość małych plików?, szybko |
Post
#1
|
|
|
Grupa: Zarejestrowani Postów: 261 Pomógł: 0 Dołączył: 24.02.2008 Ostrzeżenie: (0%) 
 |
Witam,
Mam do przesłania kilkadziesiąt tysięcy małych (1-5kb) plików na serwer. Łącznie ważą 20 mb więc przesłanie ich powinno zająć niecałe pół godziny, jednak trwa to wiele godzin ponieważ total commander przy kazdym pliku odczekuje sekundę. Czy istnieje jakiś inny sposób na szybkie przesłanie dużej liczby małych plików? |
 |
 
|
 |
|
Post
#2
|
|
|
Grupa: Zarejestrowani Postów: 99 Pomógł: 2 Dołączył: 27.10.2006 Skąd: CyberRZECZYWISTOŚĆ Ostrzeżenie: (0%)
|
Z moich obserwacji wynika, że sama ilość plików nie generuje obciążenia żadngo i nie ma pływu na działanie serwera...
Obciążenie generuje to co sie z nimi robi. Np. majac 10 000 plików w jednym katalogu przy zapytaniu typu: czy istnieje plik i następnie wyświetlenie go to obciążenie jest takie samo jak by ten plik był tylko sam w katalogu. Natomiast podczas zalogowania sie menedzerem ftp do katalogu z dużą ilością plików następuje odczyt nazw plików, ich rozmiary, daty modyfikacji itp. w tym przypadku ilość plików ma negatywny wpływ na działanie serwera(obciążenie). Ta sama zasada tyczy się robienia kopii zapasowych, jeśli jest ich dużo to serwer musi troche przetworzyć danych i robi sie to dość długo. Kiedyś robiłem sporo testów tego typu i najefektywniejsze rozwiązanie to pliki w jednym katalogu tylko poprostu trzeba nimi mądrze zarządzać, aby nie zmuszać serwera do przetwarzania ich wszystkich. |
|
|
|
AboutMe Jak przesłać na FTP dużą ilość małych plików? 21.07.2009, 12:10:12 
sowiq FileZilla -> ustawiasz np. 10 równoczesnych po... 21.07.2009, 12:13:20 ayeo Witam!
FTP to dziwny protokół. W przypadku wi... 21.07.2009, 12:18:57 AboutMe Odpaliłem tą filezillę i idzie jak burza, akurat ... 21.07.2009, 12:49:19 erix CytatNajlepiej to spakować te pliki i wysłać jako ... 21.07.2009, 13:10:21 AboutMe WTF? Widzę że filezilla ma limit do 2000... 21.07.2009, 13:16:16 
sowiq Cytat(AboutMe @ 21.07.2009, 14:16:16 ... 21.07.2009, 13:31:07 
fifi209 Cytat(AboutMe @ 21.07.2009, 13:16:16 ... 21.07.2009, 13:52:49 AboutMe Chyba faktycznie będę musiał zmniejszyć ilość plik... 21.07.2009, 13:46:18 AboutMe CytatErix napisał Ci abyś spakował ... 21.07.2009, 13:57:09 erix Może kiedyś tak było. Ale zważ na to, że współczes... 21.07.2009, 14:18:39 AboutMe Mógłbym prosić o jeszcze 1 wyjaśnienie? Skoro mój ... 3.08.2009, 11:41:47 erix Cytat~100kb więc czy to oznacza że obciążenie jest... 3.08.2009, 11:51:40 AboutMe O ile dobrze rozumiem to obciążenie generuje wielk... 3.08.2009, 12:30:38 aso824 Ja jakoś nie mogę sobie tego wyobrazić, jak by mi ... 3.08.2009, 17:01:35 erix CytatCo do tematu: nie można tych plików połączyć ... 3.08.2009, 17:28:59 faran Jeśli chodzi o wgrywanie plików na serwer to ... 3.08.2009, 21:07:53 aso824 No cóż dawno to było jak ja takie numery robiłem i... 4.08.2009, 21:51:37 erix CytatDo tematu: a zip-y odpadają? Na kompie wszyst... 4.08.2009, 23:40:17 ayeo Witam!
@erix, ale się czepiasz! Dla mnie ... 5.08.2009, 03:51:39 aso824 Faktycznie, TAR lepszy - przyznaję rację, nawet w ... 5.08.2009, 12:11:58 dr_bonzo Tar jest najszybszy bo ... nie pakuje plikow tylko... 5.08.2009, 12:17:52 AboutMe Co jest nie tak z tym kodem?
[PHP] pobierz, pl... 18.08.2009, 14:04:58 erix Po polsku: NIE MA ROZSZERZENIA/BIBLIOTEKI RAR. 18.08.2009, 15:02:20  |
|
Aktualny czas: 30.12.2025 - 13:57 |
