[PHP] Ograniczenie czasu i wykorzystania pamięci działającego skryptu, Skrypt do generowania pliku *.XML uruchamiany przez CRON Opcje

[mpps]

Witam,
potrzebuję zawrzeć w skrypcie ograniczenia czasu działania (30s) i wykorzystania pamięci (32M).
Skrypt ma być uruchamiany przez CRON.

Skrypt ma tworzyć plik *.XML dla portalu kupujemy.pl, który niestety nie posiada rozwiązań takich jak Ceneo lub Nokaut.

Czy istnieje możliwość takiego ograniczenia dla całego kodu, czy jest potrzeba stosowania ograniczeń np. przy każdej pętli?

Nie mogę skorzystać z ini_set('memory_limit', '32M') i set_time_limit(1800)...

[PHP] pobierz, plaintext 
<?php
 
// Nazwa pliku XML
ob_start();
define('AAA_XML_FILE', 'aaa.xml');
 
//@set_time_limit(1800);
 
//ini_set('memory_limit', '32M');
 
$content = '';
 
$content .= <?xml version=\"1.0\" encoding=\"ISO-8859-2\"?>\n";
$content .= "<aaa>\n";
$content .= "	<offers>\n";
 
$sql="
	SELECT [...]
";
$productQuery = tep_db_query($sql);
 
if (tep_db_num_rows($productQuery)) {
	while($productInfo = tep_db_fetch_array($productQuery)){
		$content .= "		<offer>\n";
		$content .= "			<id>".$productInfo['products_id']."</id>\n";
		$content .= "		</offer>\n";
	}
}
$content .= "	</offers>\n";
$content .= "</aaa>\n";
 
$filename = DIR_FS_CATALOG .AAA_XML_FILE;
$fp = fopen($filename, 'w+');
fwrite($fp, $content);
fclose($fp);
?>
[PHP] pobierz, plaintext 

Może ktoś z Was już się z tym spotkał?

Z góry dzięki!

Ten post edytował mpps 4.01.2012, 11:17:57

[wNogachSpisz]

Na początku skryptu przypisz do zmiennej czas microtime().
Podczas wykoywania skryptu ponownie pobieraj microtime() i sprawdzaj czy jest większy o 30 od tego pobranego na początku skryptu.

[mpps]

Jest to jakieś rozwiązanie.
Jak je zastosować do obsługi pliku?

[PHP] pobierz, plaintext 
$filename = DIR_FS_CATALOG .AAA_XML_FILE;
$fp = fopen($filename, 'w+');
fwrite($fp, $content);
fclose($fp);
[PHP] pobierz, plaintext 

Jeszcze pozostaje drugi problem dotyczący ograniczenia wykorzystania pamięci przez skrypt...

[modern-web]

Nie ograniczysz tego z poziomu aplikacji - przecież nie `powiesz` programowi, że ma coś zrobić szybciej niż potrafi - to nie człowiek, nie myśli.
microtime() jest tutaj zbędne - bo jak zastosujesz to do obsługi plików!?

To co chcesz zrobić leży w ustawieniach parsera - nie w składni języka PHP. Albo ustawisz to na sztywno w php.ini albo zdefiniujesz dla danego skryptu. Nie widzę innej możliwości.

[mpps]

Z poziomu skryptu ograniczysz.
Jeśli różnica między czas start a czas end jest większy niż 30s exit;

[PHP] pobierz, plaintext 
function get_moment(){
	$temps1 = explode(" ", microtime());
	$temps2 = explode(".", $temps1[0]);
	$temps2 = $temps1[1].".".$temps2[1];
	return $temps2;
}
function get_elapsed_time($start,$end){
	return number_format(($end - $start)* 1, 3, '.', ' ')."s";
}
$start_time=get_moment();
[...]
$max_time = 30;
echo "czas generowania pliku: ".get_elapsed_time($start_time, get_moment()) . "\n";
 
if(get_elapsed_time($start_time, get_moment()) > $max_time){
	echo "przerwij";
	exit;
}
else{
	echo "kontynuuj";
}
[PHP] pobierz, plaintext 

Możesz to wywoływać w kilku miejscach (np. po każdej pętli).
Działa, bo sprawdziłem.

Co do obsługi plików, to nie znam rozwiązania, dlatego w poprzednim poście zadałem pytanie...

Jak pisałem w pierwszym poście, nie mogę skorzystać z ini_set('memory_limit', '32M') i set_time_limit(1800)...

Pozostaje mi jeszcze ograniczenie wykorzystania pamięci (do 32M) i nie mam pomysłu jak się za to zabrać...

[modern-web]

No dobrze; da się to zrobić ale zauważ, że exit(); kończy skrypt, więc jeżeli czas ulegnie wydłużeniu nie wykona się pozostała część programu. Bardzo `polowy` sposób, którego zwyczajnie się nie zaleca.

A buforem byś tego nie załatwił?

[mpps]

No dobrze; da się to zrobić ale zauważ, że exit(); kończy skrypt, więc jeżeli czas ulegnie wydłużeniu nie wykona się pozostała część programu. Bardzo `polowy` sposób, którego zwyczajnie się nie zaleca.

Właśnie o to chodzi, żeby skrypt przerwał swoje działanie i nie wykonała się pozostała część programu...! (IMG:style_emoticons/default/wink.gif)

A co do ograniczenia czasu to rozwiązałem to tak (i działa!) (IMG:style_emoticons/default/aarambo.gif)

memory_get_usage — Returns the amount of memory allocated to PHP
int memory_get_usage ([ bool $real_usage = false ] )
Returns the amount of memory, in bytes, that's currently being allocated to your PHP script.

a więc:

[PHP] pobierz, plaintext 
$max_mem_usage = 32*1024*1024; //1024b * 1024Kb * 32Mb = 32Mb
if(memory_get_usage() >= $max_mem_usage){
	exit("przekroczony limit pamieci");
}
[PHP] pobierz, plaintext 

A buforem byś tego nie załatwił?

ob_start() jest na początku skryptu...

Jeszcze pozostaje obsługa pliku (otworzenie, zapis, zamknięcie)

Ten post edytował mpps 4.01.2012, 22:01:24

[zegarek84]

Jeszcze pozostaje obsługa pliku (otworzenie, zapis, zamknięcie)

jeśli sam kontrolujesz skrypt to ok... i tutaj luknij na fragment otworzenia, zapisu i zamkniecia... przecież zapisywać możesz fragmentami i co fragment sprawdzać czas... (a i nie pamiętam, czy w PHP jeśli zakończysz skrypt to czy plik w pewnych sytuacjach nie bedzie zablokowany - więc to sprawdź i najwyżej dodaj linijkę więcej niż tylko exit)... poza tym jakbyś trochę mniej buforował i od razu zapisywał do pliku wyjściowego fragmentami zmniejszył byś zurzycie pamięci...