 file_exists, curl i długie wykonywanie skryptu., Strojenie wydajności |
| file_exists, curl i długie wykonywanie skryptu., Strojenie wydajności |
Post
#1
|
|
 Grupa: Moderatorzy Postów: 2 921 Pomógł: 269 Dołączył: 11.08.2005 Skąd: 127.0.0.1  |
Napisałem skrypt, aktualizujący ofertę sklepu. Skrypt ten chodzi w cronie raz na dobę i zaciąga pliki xml od różnych producentów.
Po ściągnięciu i zapisaniu pliku xml lokalnie, następuje jego walidacja oraz przetwarzanie. Zauważyłem, że wąskim gardłem całego systemu jest curl (też mi nowina  ). Oferta składa się z około 1000 produktów. Do każdego z nich podczepione jest kilka obrazków (średnio 8). Każdy obrazek waży mniej więcej 20 kB. Zaciąganie takiej ilości obrazków za każdym razem jest bez sensu, dlatego też sprawdzam przy pomocy funkcji file_exists, czy aktualnie wybrany obrazek jest już ściągnięty. I teraz pojawia się problem. Jeśli obrazki są ściągane, wówczas skrypt mieli 2 - 3 h. Bez sprawdzania czy zdjęcia istnieją około 4h. Bez ściągania zdjęć 30 min.Czy funkcja file_exists rzeczywiście tak zamula, czy mam szukać "wąskiego gardła" w innym miejscu? -------------------- I would love to change the world, but they won't give me the source code.
My software never has bugs. It just develops random features. |
 |
 
|
batman file_exists, curl i długie wykonywanie skryptu. 29.06.2007, 09:57:58 
php programmer CytatJeśli obrazki są ściągane, wówczas skrypt mie... 29.06.2007, 10:06:11 batman Jak nie wynika?
Nie ściągam zdjęć - 30 min.
Ściąg... 29.06.2007, 10:20:23 php programmer Może masz błąd w niektórych ścieżkach np brak bacv... 29.06.2007, 10:34:53 
batman Jeśli wiesz o co może chodzić to le... 29.06.2007, 10:39:38   |
|
Aktualny czas: 22.08.2025 - 07:21 |
