wyciąganie linkow ze strony (curl) Opcje

[bagsiur]

Witam. Naszym zadaniem jest napisanie dla paru osób skryptu pobierającego linki ze strony. (nie chcemy tego robić, ale musimy - praktyki). Napisaliśmy skrypt z zastosowaniem curl.

[PHP] pobierz, plaintext 
<?php
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, "http://www.szkoly.info.pl/szkoly,podkarpackie,%B6rednie,0.html");
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_TIMEOUT, 30);
$wynik = curl_exec($curl);
curl_close($curl);
 
for($i=0; $i<=10; $i++){
$x=strpos($wynik, '<p >');
$y=strpos($wynik, '</p>');
$z=substr($wynik, $x, $y-$x);
echo $z;
}
 
?>
[PHP] pobierz, plaintext 

I tu zaczynają się schody. Mamy problem z wyciągnięciem wszystkim linków do szkół z tej podstrony. Prosimy też o pomoc lingwistyczną.

Ten post edytował bagsiur 6.05.2009, 08:52:13

[matx132]

[PHP] pobierz, plaintext 
<?php
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, "http://www.szkoly.info.pl/szkoly,podkarpackie,%B6rednie,0.html");
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_TIMEOUT, 30);
$wynik = curl_exec($curl);
curl_close($curl);
$z=array();
 
for($i=0; $i<=10; $i++){
$x=strpos($wynik, '<p >');
$y=strpos($wynik, '</p>');
$z[$i]=substr($wynik, $x, $y-$x);
$wynik=str_replace($z[$i]."</p>",'',$wynik);
}
for($i=0; $i<=10; $i++){
$x=strpos($z[$i], 'href="');
$y=strpos($z[$i], '" title');
$t=substr($z[$i], $x+6, $y-$x-6);
echo $t."<br>";
}
?>
[PHP] pobierz, plaintext 

Ten post edytował matx132 6.05.2009, 09:55:43

[bagsiur]

Dzięki dębiec (matx132), gdyby jednak fuddi szukał gotowca (lub ktoś inny, czegoś takiego), to wklejam kodzik (IMG:http://forum.php.pl/style_emoticons/default/smile.gif)

[PHP] pobierz, plaintext 
<?php
mysql_connect('127.0.0.1','xxxx','xxxxx') or die ('sorki blad mysqla :('); 
mysql_select_db('xxxxx') or die ('znowu blad');
 
$zm=1;
 
for($qe=0;$qe<=20;$qe=$qe+10){
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, "http://www.szkoly.info.pl/szkoly-2,podstawowe%20podstawowa,$qe.html");
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_TIMEOUT, 3000);
$wynik = curl_exec($curl);
curl_close($curl);
$z=array();
 
for($i=0; $i<=10; $i++){
$x=strpos($wynik, '<p >');
$y=strpos($wynik, '</p>');
$z[$i]=substr($wynik, $x, $y-$x);
$wynik=str_replace($z[$i]."</p>",'',$wynik);
}
for($i=0; $i<=10; $i++){
$x=strpos($z[$i], 'href="');
$y=strpos($z[$i], '" title');
$t=substr($z[$i], $x+6, $y-$x-6);
$linki[$zm]=$t;
if($i!=10) $zm++;
}
}
 
$i=1;
 
while($linki[$i]){
$curl = curl_init();
curl_setopt($curl, CURLOPT_URL, $linki[$i]);
curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($curl, CURLOPT_TIMEOUT, 30);
$wynik = curl_exec($curl);
curl_close($curl);
 
$x=strpos($wynik, '<a href="mailto:');
$z=substr($wynik, $x+16, 30);
 
$r=strpos($z, '.pl');
$la[$i]=substr($z, 0, $r+3);
 
if($la[$i]=='UBL') echo 'ni ma majla :( <br>';
else {
$x=strpos($wynik, '<b>Dane teleadresowe:</b> <br/>');
$y=strpos($wynik, '<br/>
<hr/>
');
$dane[$i]=substr($wynik, $x, $y-$x);
/* to do pozbycia sie tagow, ale z nimi jest lepeiej
$dane[$i]=str_replace("<b>", "", $z);  
$dane[$i]=str_replace("</b>", "", $z);
$dane[$i]=str_replace("<br/>", " ", $z);
$dane[$i]=str_replace('<a href="http://', "info:", $z);
$dane[$i]=str_replace('">', ' ', $z);
$dane[$i]=str_replace("</a>", "\n", $z);
*/
$x=strpos($wynik, '<h2>');
$y=strpos($wynik, '</h2>');
$nazwa[$i]=substr($wynik, $x+4, $y-$x-4);
mysql_query("insert into szkoly values(null,'$nazwa[$i]', '$la[$i]', '$dane[$i]')") or die ('lipton');
echo $i.': ok!<br>';
}
$i++;
}
mysql_close(mysql_connect('127.0.0.1','xxxxx','xxxxx'));
?>
[PHP] pobierz, plaintext