[MySQL][PHP] Optymalizacja zapisu do bazy danych, zapis danych w pętli Opcje

[zibideusz]

Witam serdecznie (IMG:style_emoticons/default/smile.gif)

Jak zwykle piszę z problemem. Otóż mój skrypt wykonuje pętle (while) i przy każdym wykonaniu zapisuje dane do bazy. Skrypt wykonuje się do momentu przekorczenia czasu wykonywania. Chodzi po prostu o to, by pętli wykonało się jak najwięcej, nie chcę ograniczać tego do konkretnej wartości, bo w zależności od danych raz potrafi przejść 5 pętli, a innym razem 30.

No i sporo już myślałem nad tym, w jaki sposób ominąć zapisywanie danych co każdą pętlę (generuje to spore obciążenia). Pomsł mam taki, by dane przechowywać w tablicy i w odpowiednim momencie (przed zakończeniem czasu wykonywania) zapisać do bazy. Wymagałoby to porównywania czasu rozpoczęcia pierwszej pętli z obecnym i na przykład po upływie 50 sekund przerwać pętlę i zrobić zapis.

Są jeszcze jakiś inne sposoby?

[mortus]

Wykonywanie zapytań co kilka kroków jest o tyle zła, że niektóre dane nie zostaną zapisane. Na przykład ustawię zapisywanie co 3 pętle, wykona mi 10 pętli, wtedy tracę dane z wykonania ostatniej. A tego nie chcemy smile.gif

Zauważ, że dzięki warunkowi || $i == $count - 1 zostaną zapisane wszystkie dane:

[PHP] pobierz, plaintext 
if(($i > 0 && $i%10 == 0) || $i == $count - 1) {
[PHP] pobierz, plaintext 

EDIT
Choć wtedy trzeba troszkę zmodyfikować kod:

[PHP] pobierz, plaintext 
$i = 1;
$count = count($data);
$sql = 'INSERT INTO `tabela` VALUES';
while($i-1 < $count) {
 $sql .= '('.$data[$i-1]['id'].', "'.$data[$i-1]['username'].'"),'; // itd.
 if($i%10 == 0 || $i-1 == $count - 1) {
  $sql = substr($sql, 0, -1);
  mysql_query($sql);
  $sql = 'INSERT INTO `tabela` VALUES';
 }
}
[PHP] pobierz, plaintext 

Co do Twojego pomysłu, to co będzie z danymi, które nie zostaną przetworzone? Wznowisz wykonywanie skryptu?

Ten post edytował mortus 31.08.2011, 10:10:42