[PHP]przekroczony czas serwera Opcje

[ttomekb]

witam
mam taki kod:

[PHP] pobierz, plaintext 
<?php
 
error_reporting(E_ALL);
ini_set('display_errors','1');
 
// dane do połączenia z bazą MySQL
$mysql_host = 'xxx';
$mysql_login = 'xxx';
$mysql_haslo = 'xxx';
$mysql_baza = 'xxx';
 
// połączenie z bazą danych
$polaczenie = mysql_connect($mysql_host, $mysql_login, $mysql_haslo) or die('Błąd: nie udało się nawiązać połączenia z bazą danych.');
 
// połączenie ze schematem bazy danych
mysql_select_db($mysql_baza) or die('Błąd: nie udało się wybrać schematu bazy danych.');
 
require_once 'class.avto.php';
 
 
$urls = array(
'url',
'url',
'url',
'url',
... (tu 40.000 urli)
 
 
);
 
 
foreach($urls as $url) {
   działąnie
   działanie
   działanie
);
 
    $result = mysql_query($query);
 
    var_dump($crawler->toArray());
}
?>
[PHP] pobierz, plaintext 

problem polega na tym ze te 40000 url sprawdza tak długo ze po około 700 przerywa się działanie skryptu...
czy możecie mi pomóc zmodyfikować to tak aby jedno zapuszczenie skryptu przemieliło wszystkie url??

Ten post edytował ttomekb 26.08.2014, 11:05:34

[rad11]

Probowales set_time_limit , max_execution_time?

Ten post edytował rad11 26.08.2014, 11:07:38

[nospor]

A skad my mamy wiedziec, co sie kryje pod tymi magicznymi
działąnie
działanie
działanie

.....

Jedyne co ci moge napisac to
albo odpalaj to z crona co pare urli a nie wszystkie
albo zwieksz dlugosc wykonywania skryptu

[ttomekb]

A skad my mamy wiedziec, co sie kryje pod tymi magicznymi
działąnie
działanie
działanie

.....

crawler pobiera dane ze strony i zapisuje do bazy

[PHP] pobierz, plaintext 
[/php]
 $crawler = new AvtoCrawler($url);
	++$id;
 
	$query = sprintf(
            "INSERT INTO avto (id, url, image, schemat, description, price, categories0, categories1, categories2, categories3, categories4, active) VALUES ('%s', '%s', '%s','%s' ,'%s' ,'%s' ,'%s' ,'%s' ,'%s' ,'%s' ,'%s' ,'%s')",
            $id,
            $url,
            $crawler->getImage(),
            $crawler->getSchema(),
            $crawler->getDescription(),
            $crawler->getPrice(),
            $crawler->getCategories()[0],
            $crawler->getCategories()[1],
            $crawler->getCategories()[2],
            $crawler->getCategories()[3],
            $crawler->getCategories()[4],
            (int)$crawler->isActive()
);
 
    $result = mysql_query($query);
 
	var_dump($crawler->toArray());[php]
[PHP] pobierz, plaintext 

set_time_limit , max_execution_time

tu raczej nie pomogą bo serwer jestustawiony tak a nie inaczej...

Ten post edytował ttomekb 26.08.2014, 11:13:29

[ctom]

odpal to sobie w konsoli - problemu z timeoutem nie będzie

nie wiem co tam skanujesz ale jak jakiś serwis - to sprawdzaj sobie czasem czy serwer nie wyciął twojego IP