Cykliczne pobieranie danych Opcje

[jsmp]

Zastanawiam się jak wygląda realizacja takiego zadania, jak codzienne zdalne zasysysanie danych z pewnego API. O ile CRON i jedna sprawdzana dana wydaje się prosta, jak zrealizować projekt dla dynamicznego zbioru danych przechowywanych w bazie?

Np. W bazie mam listę adresów WWW , które stanowią warunek dla API. Zapytanie API dla danego www zwraca pewne wartości (np. ilość backlinks). Nie jestem przekonany, czy zapytania odnośnie kilku adresów jednocześnie nie wydłużą czasu reakcji API co może skończyć się bug'ami.

Teoretycznie można by co minutę odpalać skrypt CRONem, i sprawdzać pojedyńczą daną API (wtedy mam 3600 slotów) w ciągu doby. Jednak czy to optymalne?

Ten post edytował jsmp 2.03.2014, 16:43:36

[elmaciaso]

Właśnie tak mi się wydawało odnośnie zdjęć, ale gdy zapytałem o to kogoś od tego API to powiedział że jest to traktowane jako zapytanie. Co może być powodem takiej odpowiedzi? Chęć ograniczenia ruchu spowodowanego takim wyświetlaniem zdjęć?
Nie pobieranie ich ograniczyłoby liczbę zapytań do 1 dla każdego ogłoszenia i znacznie ułatwiłoby mi pracę.

Zastanawiające było dla mnie tylko to że podając adres zdjęcia nie podaje konkretnej ścieżki np "../zdjecie/3232323.jpg" tylko adres "../zdjecie/3232323". Mimo to kierujemy się subdomeną img. a nie api. jak do zapytań.

Ten post edytował elmaciaso 9.02.2015, 12:54:20