Balancing wysoce obciążających zadań w PHP Opcje

[Ormin]

Witajcie!

Mam ustawionego cron jobsa co minutę na skrypt PHP, ktory musi wykonać dość ciężkie zadanie ( pobranie pliku/plików o dużej wadze ). W tym celu potrzebuje, aby to zadanie było w miarę porządnie rozdzielone między pare serwerów dedykowanych.

Obecnie mam to wykonane tak, że łącze się przez SOAP do serwera, który wybiera zainstalowany haproxy:

Kod

Cron_Jobs -> Polaczenie SOAP -> Haproxy -> Serwer

Ma to jednak jedna zasadnicza wade: nie wiadomo gdzie sie polaczylem do samego konca zadania, co nieco utrudnia niektore rzeczy ( np jak zrobić pasek postępu pobierania na stronie, skoro nie wiadomo nawet gdzie ten plik jest? ).

Czy macie na to jakiś zloty środek, jakiś pomysl, cokolwiek? Wszelkie sugestie mile widziane

Wybaczcie odswiezanie ( nie wiem czy moge nawet :f ) ale naprawde fajnie byloby wiedziec że ktos sie zajmuje trudniejszymi problemami anizeli niedzialajacy formularz