wyciaganie pewnych danych z strony filmweb.pl Opcje

[alpin]

witam, pewien skrpyt ulatwil by mi znaczaco zycie ale moja wiedza jest zbyt skromna by go napisac (IMG:http://forum.php.pl/style_emoticons/default/sad.gif)
chodzi mi o to zeby ze strony http://www.filmweb.pl/ wyciagnac pare danych ... na forum znalazlem skrypt ktory pobiera opis do filmu przy wejsciowych danych: nazwa filmu, rok produkcji, oto on:

[PHP] pobierz, plaintext 
<?php
/**
* Argumenty:
* string $parTitle - tytuł filmu,
* int $year - rok produkcji,
* string $cache - opcjonalny plik cache (na opisy wcześniej szukanych filmów)
* Zwraca:
* array $plots
**/
function getPlots( $parTitle, $year, $cache = false )
{
   $plots = array();
   
   if( $cache != false )
   {
	  if( $data = @file_get_contents( $cache ) )
	  {
		 $data = unserialize( $data );
 
		 if( array_key_exists( $parTitle, $data ) )
		 {
			return $data[ $parTitle ];
		 }
		 else
		 {
			foreach( $data as $name => $save )
			{
			   if( strcasecmp( $name, $parTitle ) == 0 )
			   {
				  return $save;
			   }
			}
		 }
	  }
   }
   
   $title = preg_replace( '/^(the|el|le|a) (.+)/i', '\\2, \\1', $parTitle );
 
   $url1  = 'http://www.filmweb.pl/Find?query=' . urlencode( $title ) . '&category=1&submit=szukaj';
 
   $data  = file( $url1 );
 
   if( count( $data ) > 0 )
   {
	  foreach( $data as $n => $line )
	  {
		 if( ( stripos( $line, $title ) !== false ) and ( strpos( $line, (string)$year ) !== false ) )
		 {
			if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			{
			   $url2 = $out[ 1 ];
			   break;
			}
		 }
		 if( strpos( $line, 'opisy' ) !== false )
		 {
			if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			{
			   $url3 = $out[ 1 ];
			   break;
			}
		 }
	  }
 
	  if( isset( $url2 ) )
	  {
		 $data = file( $url2 );
 
		 foreach( $data as $n => $line )
		 {
			if( strpos( $line, 'opisy' ) !== false )
			{
			   if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			   {
				  $url3 = $out[ 1 ];
				  break;
			   }
			}
		 }
	  }
 
	  if( isset( $url3 ) )
	  {
		 $data = implode( '', file( $url3 ) );
		 
		 if( preg_match_all( '/<li><div align="justify">(.+)<\/div><\/li>/', $data, $out ) )
		 {
			$plots = $out[ 1 ];
		 }
	  }
	}
 
   if( count( $plots ) > 0 )
   {
	  foreach( $plots as $n => $plot )
	  {
		 $plots[ $n ] = trim( preg_replace( '/\[.+\]/', '', str_replace( array( "\r", "\n", '<br/>' ), '', $plot, $ch ) ) );
	  }
	  if( $cache != false )
	  {
		 if( $data = @file_get_contents( $cache ) )
		 {
			$data = unserialize( $data );
		 
			if( !array_key_exists( $title, $data ) )
			{
			   $data[ $parTitle ] = $plots;
			}
		 }
		 else
		 {
			$data = array();
			$data[ $parTitle ] = $plots;
		 }
		 file_put_contents( $cache, serialize( $data ) );
	  }
   }
   return $plots;
}
 
 
print_r( getPlots( 'pasja', 2004) );
?>
[PHP] pobierz, plaintext 

posluze sie na przykladzie co chcem osiagnac, np http://czlowiek.pies.filmweb.pl/

i chcialbym wyciagnac po kolei:

[PHP] pobierz, plaintext 
<?php
 
$polski_tytul="Człowiek pies";
$oryginalny_tytul="Danny the Dog";
$produkcja="Francja,Hongkong,USA,Wielka Brytania";
$gatunek="Sensacyjny,Thriller";
$data_premiery_polska="2005-07-15";
$data_premiery_swiat="2005-02-02";
$reżyseria="Louis Leterrier";
$scenariusz="Robert Mark Kamen,Luc Besson";
$zdjęcia="Pierre Morel (I)"; 
$muzyka="Massive Attack";
$czas_trwania="103";
 
?>
[PHP] pobierz, plaintext 

Napewno jest troche tego pisania ale moze ktos chcialby sprobowac to napisac ...
W kazdym razie za kazda podpowiedz, za kazdy kawalek kodu bede wdzieczny ..

[dtb]

http://www.php.net/manual/pl/ref.pcre.php

~EDIT: A moze by tak paserem XML? - sposób wg. mnie prostrzy niż regEx'em. Polecam SimpleXML

Ten post edytował dtb 28.01.2006, 11:43:07

[mike]

~dtb ile razy mamy Ci powtarzać: Nie nabijaj postów.

Masz problemy ze wzrokiem? Chyba tak lub po prostu nie czytasz tego co powyżej!
Przecież ~alpin juz korzysta z wyrażeń regularnych. Więc po kiego wała podajesz linka. Opanuj się człowieku, nie każdy musi mieć ilość postów w tysiącach liczoną.

Normalnie dajemy ostrzeżenie po kilku zwróconych uwagach.
Ale dla Ciebie właśnie ustanawiam wyjątek: Za każdego następnego nabitego posta dostaniesz ostrzeżenie. Co Ty na to? (pytanie retoryczne)

(wszelkie komentarze na PW, wracamy do tematu)

[crash]

Powyższą funkcję napisałem tylko do pobierania opisów filmów (resztę danych mam już w bazie więc nie było potrzeby pobieranie też tego). Żeby funkcja ta pobierała te dane które chcesz trzebaby ją w sumie całą przerobić, jak będę miał chwilkę czasu może coś napiszę...

-- edit:
http://forum.php.pl/index.php?showtopic=41...=0&#entry227832
Na większość filmów działa poprawnie...

[alpin]

Naprawde Wielkie dzieki Crash, o to mi chodzilo, bardzo mi sie podoba, wisze Ci duże piwko .. (IMG:http://forum.php.pl/style_emoticons/default/winksmiley.jpg)

P.S. Probowalem przerobic ta funkcje do pobierania opisow na curla ale nie wyszlo mi, niestety ... Bylbym wdzieczny zebys jeszcze ta funkcje dopisal w curlu, z gory dziekuje.

Mam tylko jeszcze jedno pytanie ... a mozliwe jest jeszcze od strony technicznej zeby skrypt zapisywal jeszcz obrazek? (w tym przypadku chodzi mi o okladke) a jeżeli tak, to w jaki sposob mozna to zrobic ?

Ten post edytował alpin 1.02.2006, 03:39:10

[b4x]

a np ; dałoby rade przerobic to na inne potrzeby ? (IMG:http://forum.php.pl/style_emoticons/default/smile.gif)

Np wyciaganie linków + opisów z jportala :]

[crash]

Naprawde Wielkie dzieki Crash, o to mi chodzilo, bardzo mi sie podoba, wisze Ci duże piwko .. (IMG:http://forum.php.pl/style_emoticons/default/winksmiley.jpg)

Gdybym od każdego kto obiecuje mi piwko dostawał je to znowu wróciłbym do alkoholizmu :roll2:

P.S. Probowalem przerobic ta funkcje do pobierania opisow na curla ale nie wyszlo mi, niestety ... Bylbym wdzieczny zebys jeszcze ta funkcje dopisal w curlu, z gory dziekuje.

Tutaj umieściłem funkcję getData() zamień funkcję file() na właśnie tą w funkcji getPlots() (bo getMovieInfo() już jej używa) i będzie wszystko ładnie śmigać z CURL'em.

Mam tylko jeszcze jedno pytanie ... a mozliwe jest jeszcze od strony technicznej zeby skrypt zapisywal jeszcz obrazek? (w tym przypadku chodzi mi o okladke) a jeżeli tak, to w jaki sposob mozna to zrobic ?

Zrobię małą aktualizację jak będę mieć chwilkę czasu...

Edit: Zrobione. Tutaj możesz sobie pobrać rozbudowaną wersję...

[alpin]

Juz wczesniej zamienialem ta funkcje getData na file i cos nie dokonca dziala poprawnie, przynajmniej u mnie, dlatego poprosilem Ciebie o przerobienie. Kod przerobilem tak:

[PHP] pobierz, plaintext 
<?php
/**
* Argumenty:
* string $parTitle - tytuł filmu,
* int $year - rok produkcji,
* string $cache - opcjonalny plik cache (na opisy wcześniej szukanych filmów)
* Zwraca:
* array $plots
**/
function getData( $url, $type = 'array' )
{
   $data = '';
   
   if( !extension_loaded( 'curl' ) )
   {
	  @dl( 'curl' );
   }
 
   if( extension_loaded( 'curl' ) )
   {
	  $curl = curl_init();
 
	  curl_setopt( $curl, CURLOPT_URL, $url );
	  curl_setopt( $curl, CURLOPT_HEADER, false );
	  curl_setopt( $curl, CURLOPT_FOLLOWLOCATION, true );
	  curl_setopt( $curl, CURLOPT_FORBID_REUSE, true );
	  curl_setopt( $curl, CURLOPT_FRESH_CONNECT, true );
	  curl_setopt( $curl, CURLOPT_RETURNTRANSFER, true );
	  curl_setopt( $curl, CURLOPT_TIMEOUT, 25 );
 
	  $data = curl_exec( $curl );
 
	  curl_close( $curl );
   }
   else
   {
	  $data = file( $url );
   }
   
   if( ( $type == 'array' ) and !is_array( $data ) )
   {
	  $data = explode( "\n", $data );
   }
   
   return $data;
}
 
 
function getPlots( $parTitle, $year, $cache = false )
{
   $plots = array();
   
   if( $cache != false )
   {
	  if( $data = @file_get_contents( $cache ) )
	  {
		 $data = unserialize( $data );
 
		 if( array_key_exists( $parTitle, $data ) )
		 {
			return $data[ $parTitle ];
		 }
		 else
		 {
			foreach( $data as $name => $save )
			{
			   if( strcasecmp( $name, $parTitle ) == 0 )
			   {
				  return $save;
			   }
			}
		 }
	  }
   }
   
   $title = preg_replace( '/^(the|el|le|a) (.+)/i', '\\2, \\1', $parTitle );
 
   $url1  = 'http://www.filmweb.pl/Find?query=' . urlencode( $title ) . '&category=1&submit=szukaj';
 
   $data  = getData( $url1 );
 
   if( count( $data ) > 0 )
   {
	  foreach( $data as $n => $line )
	  {
		 if( ( stripos( $line, $title ) !== false ) and ( strpos( $line, (string)$year ) !== false ) )
		 {
			if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			{
			   $url2 = $out[ 1 ];
			   break;
			}
		 }
		 if( strpos( $line, 'opisy' ) !== false )
		 {
			if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			{
			   $url3 = $out[ 1 ];
			   break;
			}
		 }
	  }
 
	  if( isset( $url2 ) )
	  {
		 $data = getData( $url2 );
 
		 foreach( $data as $n => $line )
		 {
			if( strpos( $line, 'opisy' ) !== false )
			{
			   if( preg_match( '/href="([^"]+)"/', $line, $out ) )
			   {
				  $url3 = $out[ 1 ];
				  break;
			   }
			}
		 }
	  }
 
	  if( isset( $url3 ) )
	  {
		 $data = implode( '', getData( $url3 ) );
		 
		 if( preg_match_all( '/<li><div align="justify">(.+)<\/div><\/li>/', $data, $out ) )
		 {
			$plots = $out[ 1 ];
		 }
	  }
	}
 
   if( count( $plots ) > 0 )
   {
	  foreach( $plots as $n => $plot )
	  {
		 $plots[ $n ] = trim( preg_replace( '/\[.+\]/', '', str_replace( array( "\r", "\n", '<br/>' ), '', $plot, $ch ) ) );
	  }
	  if( $cache != false )
	  {
		 if( $data = @file_get_contents( $cache ) )
		 {
			$data = unserialize( $data );
		 
			if( !array_key_exists( $title, $data ) )
			{
			   $data[ $parTitle ] = $plots;
			}
		 }
		 else
		 {
			$data = array();
			$data[ $parTitle ] = $plots;
		 }
		 file_put_contents( $cache, serialize( $data ) );
	  }
   }
   return $plots;
}
 
print_r( getPlots( 'Poranek kojota', 2005) );
 
?>
[PHP] pobierz, plaintext 

i zwraca opisy tylko ze wszystkie opisy sa jako jeden element tablicy ...

A pobieranie adresu obrazke czemus mi niestety nie dziala ;( probowalem na paru filmach

[crash]

Zmień (tutaj linia 126):

[PHP] pobierz, plaintext 
<?php
if( preg_match_all( '/<li><div align="justify">(.+)<\/div><\/li>/', $data, $out ) )
?>
[PHP] pobierz, plaintext 

Na:

[PHP] pobierz, plaintext 
<?php
if( preg_match_all( '/<li><div align="justify">(.+?)<\/div><\/li>/', $data, $out ) )
?>
[PHP] pobierz, plaintext 

[alpin]

Ok, dziala (IMG:http://forum.php.pl/style_emoticons/default/winksmiley.jpg) A u Ciebie wyswietla adres obrazka ?

Ten post edytował alpin 1.02.2006, 15:40:04

[crash]

Sprawdziłem na kilkudziesięciu tytułów i działa dobrze. Problem tkwi w pliku cache. Usuń go...

[alpin]

Wszystko juz dziala, wielkie dzieki za wszystko, pozdrawiam

Ten post edytował alpin 1.02.2006, 22:03:05