Pobranie strony internetowej z poziomu php, jak to ugryźć :) Opcje

[L_Devil]

Witam!

Chciałbym napisać prosty system katalogów stron internetowych. User podawałby adres swojej strony, a mój skrypt odwiedzałby go, spisywał META, itp. O ile potafię rozbić stronę ukrytą w zmiennej na konkretne znaczniki, odczytać meta i a href'y, o tyle problemem jest dostanie tej strony.

Moje pytanie brzmi: Jak otworzyć stronę internetową przez php i dostać jej zawartość do zmiennej? Słyszałem, że może do tego posłużyć fsockopen...

Z góry dzięki za wszelką pomoc

[L_Devil]

użyłem tej funkcji:

[PHP] pobierz, plaintext 
<?php
function doPost($uri,$postdata,$host){
	   $da = fsockopen($host, 80, $errno, $errstr);
	   if (!$da) {
		   echo "$errstr ($errno)<br/>n";
		   echo $da;
	   }
	   else {
		   $salida ="POST $uri  HTTP/1.1rn";
		   $salida.="Host: $hostrn";
		   $salida.="User-Agent: php Scriptrn";
		   $salida.="Content-Type: application/x-www-form-urlencodedrn";
		   $salida.="Content-Length: ".strlen($postdata)."rn";
		   $salida.="Connection: closernrn";
		   $salida.=$postdata;
		   fwrite($da, $salida);
					 while (!feof($da))
			   $response.=fgets($da, 128);
		   $response=split("rnrn",$response);
		   $header=$response[0];
		   $responsecontent=$response[1];
		   if(!(strpos($header,"Transfer-Encoding: chunked")===false)){
			   $aux=split("rn",$responsecontent);
			   for($i=0;$i<count($aux);$i++)
				   if($i==0 || ($i%2==0))
					   $aux[$i]="";
			   $responsecontent=implode("",$aux);
		   }//if
		   return chop($responsecontent);
	   }//else
   }//function-doPost
?>
[PHP] pobierz, plaintext 

W taki sposób:

[PHP] pobierz, plaintext 
<?php
if($temp_database)
{
	$temp_database['url'] = "http://localhost/moja_strona/plik.php"; // to dostaję z bazy danych
	$temp = substr($temp_database['url'], 7);
	$temp_arr = explode("/", $temp);
	$host = $temp_arr[0];
	$temp_arr[0] = "";
	$postdata = "";
	$temp = implode("/", $temp_arr);
	echo doPost($temp, "", $host);
}
?>
[PHP] pobierz, plaintext 

I dostałem na dzień dobry stronę z Internal Server Error... po czym jeszcze powtórzoną kilkadziesiąt razy poprawną stronę odbiorcy... co robię nie tak?

Ten post edytował L_Devil 20.10.2006, 18:48:13