[PHP/CURL] Problem z przesyłaniem POST Opcje

[linx]

Witam,
jestem w trakcie pisania mechanizmu dodawania ogłoszeń do portalu ogłoszeniowego.
Mechanizm dobrze działa o ile przy przesyłaniu danych metodą POST nie da się za dużo znaków.
Do jakieś ilości znaków skrypt działa prawidłowo, powyżej jakieś liczny znaków (nie wiem jakiej) skrypt w ogóle się nie wykonuje.

[PHP] pobierz, plaintext 
<?php
 
$strona = curl_init();
curl_setopt($strona, CURLOPT_HEADER, false);
curl_setopt($strona, CURLOPT_FRESH_CONNECT, true);
curl_setopt($strona, CURLOPT_RETURNTRANSFER, true);
curl_setopt($strona, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($strona, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows; U; Windows NT 5.1; pl; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10');
curl_setopt($strona, CURLOPT_COOKIESESSION, TRUE);
curl_setopt($strona, CURLOPT_COOKIEFILE, 'cookies.txt');
curl_setopt($strona, CURLOPT_COOKIEJAR, 'cookies.txt');
curl_setopt($strona, CURLOPT_COOKIE, session_name() . '=' . session_id());
curl_setopt($strona, CURLOPT_TIMEOUT, 50);
//logowanie do strony
curl_setopt($strona, CURLOPT_POST, true);
curl_setopt($strona, CURLOPT_POSTFIELDS, 'dane_do_logowania_przesylane_met_post');
curl_setopt($strona, CURLOPT_URL, 'http://link_do_strony_z_logowaniem');
curl_exec($strona);
//logowanie do strony eof
 
//dodawanie ogloszenia
curl_setopt($strona, CURLOPT_POST, true);
//przy wysyłaniu POST w tym miejscu przydużej ilości znaków skrypt wogóle się nie wykonuje 
curl_setopt($strona, CURLOPT_POSTFIELDS, 'dane_przesylane_post_dane_do_ogloszen');
curl_setopt($strona, CURLOPT_URL, 'http://link_do_strony_z_dodawaniem_ogloszenia');
echo curl_exec($strona);
//dodawanie ogloszenia eof
curl_close($strona); 
 
?>
[PHP] pobierz, plaintext 

Moja wiedza z tego zakresu nie jest duża więc wszelkie uwagi mile widziane.

[carbolymer]

Przedstaw dokładniej problem jeśli możesz. Przy jakich danych przestaje Ci działać wysyłanie POST? Wysyłasz dane w formacie ciągu (tj. http_build_query" title="Zobacz w manualu PHP" target="_manual) czy tablicy asocjacyjnej?

[linx]

a więc, przy takiej postaci działa (wycinek kodu)

[PHP] pobierz, plaintext 
<?php
$ogloszenie[kategoria] = '0010';
$ogloszenie[tytul] = 'ogloszenie ogloszenie ogloszenie ogloszenie';
$ogloszenie[opis] = 'ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie';
$ogloszenie[mail] = 'rysio@xxx.pl';
$ogloszenie[gal] = 'http://img1.classistatic.com/cps/l/kj/09/5/31/889/r4/2852a6a_18.jpeg?set_id=1C4000';
$ogloszenie[gal_min] = 'http://img1.classistatic.com/cps/l/kj/09/5/31/889/r4/2852a6a_14.jpeg';
 
curl_setopt($strona, CURLOPT_POSTFIELDS, 'SubArea=3200008&Thumbnail='.$ogloszenie[gal_min].'&Photo='.$ogloszenie[gal].'&featuredAdDuration=0&CatId='.$ogloszenie[kategoria].'&Email=rysio@dknet.com.pl&Title='.$ogloszenie[tytul].'&Description='.$ogloszenie[opis].'&ReformattedDesc=1&PreviewToPost=false');
?>
[PHP] pobierz, plaintext 

a przy takiej już nie (wycinek kodu), kod w ogóle się nie wykonuje, może to jakieś ograniczenia php lub biblioteki curl

[PHP] pobierz, plaintext 
<?php
$ogloszenie[kategoria] = '0010';
$ogloszenie[tytul] = 'ogloszenie ogloszenie ogloszenie ogloszenie';
$ogloszenie[opis] = 'ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ogloszenie ';
$ogloszenie[mail] = 'rysio@xxx.pl';
$ogloszenie[gal] = 'http://img1.classistatic.com/cps/l/kj/09/5/31/889/r4/2852a6a_18.jpeg?set_id=1C4000';
$ogloszenie[gal_min] = 'http://img1.classistatic.com/cps/l/kj/09/5/31/889/r4/2852a6a_14.jpeg';
 
curl_setopt($strona, CURLOPT_POSTFIELDS, 'SubArea=3200008&Thumbnail='.$ogloszenie[gal_min].'&Photo='.$ogloszenie[gal].'&featuredAdDuration=0&CatId='.$ogloszenie[kategoria].'&Email=rysio@dknet.com.pl&Title='.$ogloszenie[tytul].'&Description='.$ogloszenie[opis].'&ReformattedDesc=1&PreviewToPost=false');
?>
[PHP] pobierz, plaintext 

ale z tego co zauważyłem są to jakieś ograniczenia CURLOPT_POSTFIELDS, ponieważ niema to znaczenia czy $ogloszenie[opis] czy $ogloszenie[gal] ma ja dużą ilość danych.

Ten post edytował linx 1.06.2009, 13:58:28

[erix]

Spróbuj tym: http://scripts.incutio.com/httpclient/

[linx]

Nie mogę za bardzo poradzić sobie z tą biblioteką.
Nie wiem czy to wina mojego skryptu, czy czegoś brakuje mi na serwerze(raczej czegoś mi na nim brakuje).

A może ktoś wie jak rozwiązać mój problem przy użyciu CURL??

[golaod]

Komentarz z php.net

If you are doing a POST, and the content length is 1,025 or greater, then curl exploits a feature of http 1.1: 100 (Continue) Status.

See http://www.w3.org/Protocols/rfc2616/rfc261...8.html#sec8.2.3

* it adds a header, "Expect: 100-continue".
* it then sends the request head, waits for a 100 response code, then sends the content

Not all web servers support this though. Various errors are returned depending on the server. If this happens to you, suppress the "Expect" header with this command:

<?php
curl_setopt($ch, CURLOPT_HTTPHEADER, array('Expect:'));
?>

See http://www.gnegg.ch/2007/02/the-return-of-...t-100-continue/

Ten post edytował golaod 3.06.2009, 12:09:53

[erix]

Nie mogę za bardzo poradzić sobie z tą biblioteką.

Z czym sobie nie radzisz? Masz przecież dokumentację. A z tego, co widzę, to cURL-em nie pójdzie, trzeba ręcznie konstruować pakiet HTTP i wysyłać przez fsockopen" title="Zobacz w manualu PHP" target="_manual, co ta biblioteka właśnie realizuje.

[golaod]

No niby znalazłem

$curl->setopt( CURLOPT_POSTFIELDS, "$string" );
$curl->setopt( CURLOPT_POSTFIELDSIZE, $length );
$curl->setopt( CURLOPT_POST, 1 );
$curl->setopt( CURLOPT_CONNECTTIMEOUT,8);

Jednak ja osobiście nie widzę takiej flagi w dokumentacji. Tzn. do C/C++ znalazłem jednak do php brak.

Może definiując samemu w nagłówku POST/ by zadziałało ?

Osobiście jednak przyłączam się do erix'a. Biblioteka ma dokumentacje więc można skorzystać.

Ten post edytował golaod 3.06.2009, 12:22:42

[golaod]

A mam takie pytanie. Jesteś pewien, że tam gdzie powinna trafić tablica post to strona www.//twoja_podana_strona.pl/logowanie.php ?
A może ma być logowanie.php?login=1 albo check_login.php albo może jest jakiś <input type="hidden" /> który też musi być przesłany ?
Poza tym z tego, co widzę to skrypt sam zapamiętuje cookie więc nie trzeba mu podawać go za pomocą setCookie chyba, że chcesz odzyskać sesje lub uruchomić jakieś autologowanie.

Ten post edytował golaod 8.07.2009, 15:20:38

[linx]

A więc tak, skrypt przy użyciu CURL działa prawidłowo. Tylko tak jak pisałem wyżej nie nadaje się przy przesyłaniu dużej ilości danych POST`em.

[PHP] pobierz, plaintext 
<?php
 
$ogloszenie = array();
$ogloszenie[kategoria] = 'kat1';
$ogloszenie[tytul] = 'tytul_opisu';
$ogloszenie[opis] = 'opis';
$ogloszenie[gal] = 'link_do_img';
$ogloszenie[gal_min] = 'link_do_img_mini';
$strona = curl_init();
 
curl_setopt($strona, CURLOPT_HEADER, false);
curl_setopt($strona, CURLOPT_FRESH_CONNECT, true);
curl_setopt($strona, CURLOPT_RETURNTRANSFER, true);
curl_setopt($strona, CURLOPT_FOLLOWLOCATION, true);
curl_setopt($strona, CURLOPT_USERAGENT, 'Mozilla/5.0 (Windows; U; Windows NT 5.1; pl; rv:1.9.0.10) Gecko/2009042316 Firefox/3.0.10');
curl_setopt($strona, CURLOPT_COOKIESESSION, TRUE);
curl_setopt($strona, CURLOPT_COOKIEFILE, 'cookies.txt');
curl_setopt($strona, CURLOPT_COOKIEJAR, 'cookies.txt');
curl_setopt($strona, CURLOPT_COOKIE, session_name() . '=' . session_id());
curl_setopt($strona, CURLOPT_TIMEOUT, 50);
curl_setopt($strona, CURLOPT_POST, true);
curl_setopt($strona, CURLOPT_POSTFIELDS, 'login=rysiopysio&haslo=jakieshaselko&Submit=zaloguj się');
 
curl_setopt($strona, CURLOPT_URL, 'http://strona_www.pl/logowanie.php');
 
curl_setopt($strona, CURLOPT_POST, true);
curl_setopt($strona, CURLOPT_POSTFIELDS, 'SubArea=3200008&Thumbnail='.$ogloszenie[gal_min].'&Photo='.$ogloszenie[gal].'&featuredAdDuration=0&CatId='.$ogloszenie[kategoria].'&Title='.$ogloszenie[tytul].'&Description='.$ogloszenie[opis].'&ReformattedDesc=1&PreviewToPost=false&submit=dodaj ogłoszenie >');
curl_setopt($strona, CURLOPT_URL, 'http://strona_www.pl/panel.php');
curl_close($strona); 
 
?>
[PHP] pobierz, plaintext 

W nowym skrypcie próbowałem dodawać "Submit=zaloguj się"

[PHP] pobierz, plaintext 
<?php
$client->post('/logowanie.php', array(
   'login' => 'rysio',
   'haslo' => 'cosik',
   'Submit' => 'zaloguj się'
));
?>
[PHP] pobierz, plaintext 

W takiej konfiguracji dostaje odpowiedź od strony
Twoja przeglądarka nie akceptuje plików cookie. Włącz pliki cookie, jeśli chcesz się zalogować.

Jakiś pomysł(IMG:http://forum.php.pl/style_emoticons/default/questionmark.gif)

Sorry że nie podaje adresu strony ale wolałbym nie rozpisywać się o jej nazwie na lewo i prawo.

[aart3k]

Próbowałeś tego:

Kod

curl_setopt($ch, CURLOPT_HTTPHEADER, array('Expect:'));

[linx]

Próbowałem,
niestety ten wpis nie załatwia do końca problemu. Fakt skrypt się wykonuje ale przy dużej ilości danych nie wszystko jest przesyłane.

[erix]

Poszukaj jakichś klas a'la HTTP Client, które otwierają żądanie surowo przez fsockopen" title="Zobacz w manualu PHP" target="_manual. Są skuteczne tam, gdzie cURL nie daje rady. [;

[linx]

[PHP] pobierz, plaintext 
<?php
 
require_once('HttpClient.class.php');
$plik_cookie = 'ciastko.txt';
 
$client = new HttpClient('strona_www.pl');
$client->setMaxRedirects(10);
$client->setDebug(true);
 
$client->setUserAgent('Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.3a) Gecko/20021207');
$client->post('/logowanie.php', array(
   'login' => 'rysio',
   'haslo' => 'cosik'
));
// pobieranie danych cookie i zapisywanie ich do pliku
foreach($client -> getHeaders() as $typ1 => $wartosc1){
   if ($typ1 == 'set-cookie'){
           $i=0;
       foreach($wartosc1 as $typ2 => $wartosc2){
           if(!$i == 0){ $zapis_cookie .= "r\n";}
           $zapis_cookie .= "$wartosc2";
           $i++;
       }
   }
}
//czytanie danych z pliku i przekształcanie do tablicy
file_put_contents($plik_cookie, $zapis_cookie);
$czytanie_z_cookie = file_get_contents($plik_cookie);
$dzielenie_linie = explode("r\n", $czytanie_z_cookie);
 
$client->setCookies($dzielenie_linie);
 
$client->get('/panel.php');
 
echo $client->getContent();
 
?>
[PHP] pobierz, plaintext 

Po wykonaniu skryptu, mieli ale dalej nie dostaje się tam gdzie chcę.
Coś robię nie tak z cookie tylko za bardzo nie wiem gdzie jest i na czym polega błąd.

Debud wyś:

-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Request
POST /logowanie.php HTTP/1.0
Host: strona_www.pl
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.3a) Gecko/20021207
Accept: text/xml,application/xml,application/xhtml+xml,text/html,text/plain,image/png,image/jpeg,image/gif,*/*
Accept-encoding: gzip
Accept-language: en-us
Content-Type: application/x-www-form-urlencoded
Content-Length: 42

login=rysio&haslo=cosik
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: HTTP/1.0 200 OK
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Received Headers
Array
(
[server] => Apache-Coyote/1.1
[p3p] => CP="CAO PSA OUR"
[content-type] => text/html;charset=utf-8
[content-length] => 27042
[date] => Sun, 05 Jul 2009 19:01:21 GMT
[connection] => close
[set-cookie] => Array
(
[0] => area_preference=Vguid=2AQAAASIH1koAAM4AMGFkZWU2ZjUxLWEzYzYtNDJkNC05ZTRjLWRjOTIwM
gxNWU0ZS0xMjI0YzRhYjk5ZQzxGgHPtxjg5omMDaiN/zG7AUUt^random_marker=31; Domain=.strona_www.p; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=/
[1] => cls-last-visit=1246820481450; Domain=strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=
)

[cache-control] => private
)
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Persisting referer: http://strona_www.pl/logowanie.php
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Request
GET /panel.php HTTP/1.0
Host: strona_www.p
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.3a) Gecko/20021207
Accept: text/xml,application/xml,application/xhtml+xml,text/html,text/plain,image/png,image/jpeg,image/gif,*/*
Accept-encoding: gzip
Accept-language: en-us
Referer: http://strona_www.pl/logowanie.php
Cookie: 0=area_preference=Vguid=2AQAAASIH1koAAM4AMGFkZWU2ZjUxLWEzYzYtNDJkNC05ZTRjLWRjOTI
MzgxNWU0ZS0xMjI0YzRhYjk5ZQzxGgHPtxjg5omMDaiN/zG7AUUt^random_marker=31; Domain=.strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=/; 1=cls-last-visit=1246820481450; Domain=strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=;
Content-Type: application/x-www-form-urlencoded
Content-Length: 42

login=rysio&haslo=cosik
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: HTTP/1.0 302 Moved Temporarily
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Received Headers
Array
(
[server] => Apache-Coyote/1.1
[location] => http://strona_www.pl/logowanie.php?gdzie=panel
[content-length] => 0
[date] => Sun, 05 Jul 2009 19:01:23 GMT
[connection] => close
)
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Persisting referer: http://strona_www.pl/panel.php
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Request
GET /logowanie.php HTTP/1.0
Host: strona_www.p
User-Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.3a) Gecko/20021207
Accept: text/xml,application/xml,application/xhtml+xml,text/html,text/plain,image/png,image/jpeg,image/gif,*/*
Accept-encoding: gzip
Accept-language: en-us
Referer: http://strona_www.p/panel.php
Cookie: 0=area_preference=Vguid=2AQAAASIH1koAAM4AMGFkZWU2ZjUxLWEzYzYtNDJkNC05ZTRjLWRjOTI
MzgxNWU0ZS0xMjI0YzRhYjk5ZQzxGgHPtxjg5omMDaiN/zG7AUUt^random_marker=31; Domain=.strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=/; 1=cls-last-visit=1246820481450; Domain=strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:21 GMT; Path=;
Content-Type: application/x-www-form-urlencoded
Content-Length: 42

login=rysio&haslo=cosik
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: HTTP/1.0 200 OK
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Received Headers
Array
(
[server] => Apache-Coyote/1.1
[p3p] => CP="CAO PSA OUR"
[content-type] => text/html;charset=utf-8
[content-length] => 27023
[date] => Sun, 05 Jul 2009 19:01:23 GMT
[connection] => close
[set-cookie] => Array
(
[0] => area_preference=Vguid=2AQAAASIH1koAAM4AMDQ1ZTQ3ZjYyLWY0MDYtNDAxYy04MTJiLWM0ZmRhN
FhYjllMS0xMjI0YzRhYzI4MI+oJw31yQqkF513I5fm4JX4tTYR^random_marker=23; Domain=.strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:23 GMT; Path=/
[1] => cls-last-visit=1246820483718; Domain=strona_www.pl; Expires=Mon, 05-Jul-2010 19:01:23 GMT; Path=
)

)
-----------------------------------------------------------------------------------------------------------------
HttpClient Debug: Persisting referer: http://strona_www.pl/logowanie.php
-----------------------------------------------------------------------------------------------------------------

Ma ktoś jakiś pomysł(IMG:http://forum.php.pl/style_emoticons/default/questionmark.gif)

Ten post edytował linx 14.07.2009, 20:01:58