Witaj Gościu! ( Zaloguj | Rejestruj )

Forum PHP.pl

 
Reply to this topicStart new topic
> [PHP/CURL] Jak przyśpieszyć CURLa?
Ziem
post
Post #1





Grupa: Zarejestrowani
Postów: 71
Pomógł: 1
Dołączył: 29.10.2008

Ostrzeżenie: (0%)
-----


Witam!
W jaki sposób mogę przyśpieszyć CURLa?

Mój skrypt wykonuje następujące działania: wchodzi na stronę, następnie pobiera konkretne podstrony i z nich wydziela potrzebne dane. Niestety "schodzi" mu to bardzo długo. Dla około 80 podstron czas wykonywania skryptu wynosi w przybliżeniu 30 sekund. W wypadku gdy liczba podstron wzrośnie (powiedzmy) do 1000 to skrypt będzie się wykonywał około 6/7 minut. Wiem, że nie jest to bardzo dużo, ale ten wynik nie jest dla mnie satysfakcjonujący...

Czy idzie coś z tym zrobić?
Czy możliwe jest ominięcie jakichś części strony przy pobieraniu?

Stronę pobieram tak:
  1. $curl = curl_init();
  2. curl_setopt($curl, CURLOPT_URL, $url);
  3. curl_setopt($curl, CURLOPT_RETURNTRANSFER, 1);
  4. $html = curl_exec($curl);
  5. curl_close($curl);


Pozdrawiam, Ziem!
Go to the top of the page
+Quote Post
Wicepsik
post
Post #2





Grupa: Zarejestrowani
Postów: 1 575
Pomógł: 299
Dołączył: 26.03.2009

Ostrzeżenie: (20%)
X----


curl_multi_init
Go to the top of the page
+Quote Post
Ziem
post
Post #3





Grupa: Zarejestrowani
Postów: 71
Pomógł: 1
Dołączył: 29.10.2008

Ostrzeżenie: (0%)
-----


Dzięki za odpowiedz!
Tylko teraz pytanie: jak to porozdzielać?

Podzielić ilość podstron na pół/ćwierć i niech każdy z osobna przetwarza swoje?
Go to the top of the page
+Quote Post

Reply to this topicStart new topic
2 Użytkowników czyta ten temat (2 Gości i 0 Anonimowych użytkowników)
0 Zarejestrowanych:

 



RSS Aktualny czas: 24.12.2025 - 21:51