[php] pobieranie strony Opcje

[maniek74]

Witam

Jak można pobrać stronę udając przeglądarkę.
Np strona http://www.baza-firm.com.pl/Finansowe-usługi/strona-1

zwykłe

[PHP] pobierz, plaintext 
<?php
$link = 'http://www.baza-firm.com.pl/Finansowe-usługi/strona-1';
$html = file_get_contents($link);
print $html;
?>
[PHP] pobierz, plaintext 

nie pobiera strony, można jakoś ją pobrać?

Pozdrawiam

[johny_s]

ctrl+u ctrl+a ctrl+c ctrl+v

ew.
http://www.php.net/manual/en/book.curl.php

[maniek74]

Też było

[PHP] pobierz, plaintext 
$link = 'http://www.baza-firm.com.pl/Finansowe-usługi/strona-1/';
$ch = curl_init();    
curl_setopt($ch, CURLOPT_URL, $link); 
curl_setopt($ch, CURLOPT_RETURNTRANSFER,1); 
curl_setopt($ch, CURLOPT_TIMEOUT, 3); 
$result = curl_exec($ch); 
curl_close($ch); 
 
[PHP] pobierz, plaintext 

Prosiłbym o wskazówkę co robię nie tak.

[johny_s]

mają zabezpieczenie przed botami

Ten post edytował johny_s 2.06.2014, 20:51:22

[ziolo]

Wystarczy dodać user agent.

[PHP] pobierz, plaintext 
$link = 'http://www.baza-firm.com.pl/Finansowe-usługi/strona-1/';
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $link);
curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
curl_setopt($ch, CURLOPT_TIMEOUT, 3);
curl_setopt($ch, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows NT 6.2; WOW64; rv:17.0) Gecko/20100101 Firefox/17.0');
$result = curl_exec($ch);
curl_close($ch); 
[PHP] pobierz, plaintext 

[maniek74]

Dzięki ziolo
i jeszcze jedno trzeba zmieniac proxy bo po 10 odświerzeniach daje bana, chociaż to dziwne bo odświerzam stronę co 1-1,5 losowo i tak dostalem bana na ip.
Dziwna jest ta strona tak jakby użytkownik nie mógł jej przeglądać więcej niż 10 razy.

Ale dla potomnych kod curl

[PHP] pobierz, plaintext 
<?php
 
$link = 'http://www.baza-firm.com.pl/Finansowe-usługi/strona-1/';
 
$ch = curl_init();
curl_setopt($ch, CURLOPT_URL, $link);
curl_setopt($ch, CURLOPT_USERAGENT ,'Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.13) Gecko/20080311 Firefox/2.0.0.13');
curl_setopt($ch, CURLOPT_HEADER, 1);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_PROXYPORT, '8080');
curl_setopt($ch, CURLOPT_PROXYTYPE, 'HTTP');
curl_setopt($ch, CURLOPT_PROXY, '109.230.80.110');
$html = curl_exec($ch);
 curl_close($ch);
?>
[PHP] pobierz, plaintext 

lista proxy jest dostępna w necie.

A teraz do johny_s, za bardzo nie wiem po co odpowiadasz jesli nie masz chęci pomóc, nabijanie postów i heitowanie dla zabawy?(IMG:style_emoticons/default/questionmark.gif) (IMG:style_emoticons/default/questionmark.gif)
Ja jak znajdę rozwiązanie zawsze daję kod dla potomnych, żeby ktos się już nie męczył

Pozdrawiam

[johny_s]

Bo nie lubie cwaniaków? Chcesz baze napisz do nich pewnie sprzedadzą...
A poza tym pytałeś dlaczego to Ci odpowiedziałem

Ten post edytował johny_s 2.06.2014, 22:01:23

[maniek74]

Po pierwsze robię to dla sportu, nie ściągam ich bazy.
Po drugie lubię łamac zabezpieczenia stron

Pozdrawiam

[johny_s]

Jakiś marny łąmacz zabezpieczeń z Ciebie skoro głupie nagłówki Cie zablokowały

[maniek74]

Jakie to polskie nie pomóc tylko po chamsku obrażać innego.
Jak jesteś taki wspaniały pochwal się swoimi skryptami, programami.

Ja mam się czym chcwalić i moje programy sprzedają się dobrze.

Pozdrawiam

[johny_s]

Jakie to polskie nie pomóc tylko po chamsku obrażać innego.

W obchodzeniu zabezpieczeń? pomyliłeś fora te jest dla programistów nie pseudo hakerów

Jak jesteś taki wspaniały pochwal się swoimi skryptami, programami.

po co? nie widzę takiej potrzeby aby coś sobie albo komuś udowadniać, wystarczy że klienci są zadowoleni

Ja mam się czym chcwalić i moje programy sprzedają się dobrze.

no to tylko pogratulować

Ten post edytował johny_s 2.06.2014, 23:02:17