[PHP]Jak zasymulować wejście na witryne z danego ip (ip serwera), cURL Opcje

[nitro11]

Witam,

Chcę pobrać za pomocą cURL ocenę ze strony http://www.filmweb.pl/serial/4400-2004-122684.

Problem polega na tym, ze często dla pierwszego wejścia z danego ip
pojawia się reklama, którą można opuścić klikając link 'przejdz do filmweb'.

Za pomocą cURL, wyciągam ten link, gdyż skrypt na serwerze ciągle dostaję stronę z reklamą.
Jednak po wejściu na ten link za pomocą cURL, dalej wyświetla mi się ta reklama.

Byłem, przekonany, że wyświetla się ona tylko dla danego ip, które po raz pierwszy odwiedziło
stronę i ewentualnie nie kliknęło linka 'przejdz...' ale jednak mimo pobrania tego linka
i ponownego połączenie dalej mam reklamę.

EDIT

Zauważyłem, że sytuacja nie zależy tyle od IP co od przeglądarki, bo na każdej za pierwszym
razem dostaje reklamę a za 2 odświeżeniem właściwa stronę, więc tak jakby User Agent był istotny,
ale dodałem, takiego jak mam w przeglądarce, która już nie wyświetla reklamy (dane z Live Headers),
jednak nic to nie zmieniło.

Może chodzi o cookie?

Ale i tak jes ustawiam w cURL:

[PHP] pobierz, plaintext 
curl_setopt($ch_e, CURLOPT_COOKIEFILE, dirname(__FILE__) . '/cookie.txt');
curl_setopt($ch_e, CURLOPT_COOKIEJAR, dirname(__FILE__) . '/cookie.txt');
[PHP] pobierz, plaintext 

Ten post edytował nitro11 10.09.2010, 04:24:09

[krzysiej]

jakis czas temu zrobilem bota w konsoli w php ktory zywcem przechodził od filmu do filmu parsował stronke i wrzucał do bazy wszystko co znalazł wlasnie na filmwebie, tez mialem problem z reklamą ale wystarczyło ze w surlu ustawilem, cookiefile i cookiejar dokladnie tak jak piszesz nie potrzebne było zadne ip ani useragent.
edit zawsze mozesz uzyc adresów w formacie: http://filmweb.pl/Film?id=xxxxx gdzie xxxxx to jakas liczba

Ten post edytował krzysiej 10.09.2010, 09:20:07