Jak przyśpieszyć update Opcje

[borpaw]

Mam tabele która ma kilka milionów rekordów, wykonanie na niej najprostsze UPDATE zajmóje około 20 sek

Sama tabela ma około 30 kolumn, to też ma wpływ na czas wykonania.

Czy można coś zrobić żeby było szybciej? Czy może najlepiej rozbić tabele na mniejsze w sensie liczby kolumn?

Ten post edytował borpaw 13.07.2013, 10:24:12

[gothye]

może na początku pokaż strukturę tabeli i zapytanie jakim wykonujesz update

[borpaw]

Proszę bardzo, tabela:

[SQL] pobierz, plaintext 
CREATE TABLE `data` (
  `id` int(100) NOT NULL AUTO_INCREMENT,
  `pole_1` varchar(100) NOT NULL,
  `pole_2` varchar(100) NOT NULL,
  `pole_3` varchar(100) NOT NULL,
  `pole_4` varchar(100) NOT NULL,
  `pole_5` varchar(100) NOT NULL,
  `pole_6` varchar(100) NOT NULL,
  `pole_7` varchar(100) NOT NULL,  
  `pole_8` int(11) NOT NULL,
  `pole_9` int(11) NOT NULL,
  `pole_10` int(11) NOT NULL,
  `pole_11` int(11) NOT NULL,
  `pole_12` varchar(100) NOT NULL,
  `pole_13` varchar(100) NOT NULL,
  `pole_14` varchar(100) NOT NULL,
  `pole_15` int(11) NOT NULL,
  `pole_16` int(11) NOT NULL,
  `pole_17` int(11) NOT NULL,
  `pole_18` varchar(100) NOT NULL,
  `pole_19` varchar(100) NOT NULL,
  `pole_20` varchar(100) NOT NULL,
  `pole_21` int(11) NOT NULL,
  `pole_22` int(11) NOT NULL,
  PRIMARY KEY (`id`)
) ENGINE=MyISAM DEFAULT CHARSET=utf8;
[SQL] pobierz, plaintext 

[SQL] pobierz, plaintext 
UPDATE DATA SET pole_1='test'
[SQL] pobierz, plaintext 

[rocktech.pl]

Witam.

[SQL] pobierz, plaintext 
ALTER TABLE `data` ENGINE=INNODB;
[SQL] pobierz, plaintext 

[borpaw]

Zmieniłem na InnoDB i jest znacznie gorzej.

Chyba nic poza rozbiciem na mniejsze tabele nie pozostaje, co myślicie?

[sazian]

no niestety ale aktualizacja kilku milionów rekordów musi trochę trwać

[bpskiba]

Zapytam o serwer.
Myślę, że chodzi na słabej maszynie lub na domyślnej konfiguracji. Kilka milionów rekordów to dużo, ale czas rzędu 20s to przesada. Odpalałeś skrypty do optymalzacji??

[borpaw]

nie odpalałem a co dokładnie trzeba zrobić?

[bpskiba]

Mysql wymaga ręcznej konfiguracji wielkości buforów pamięci w pliku konfiguracyjnym.
Domyślna konfiguracja jest wystarczająca dla małych baz danych i słabych maszyn. Wykorzystuje ona jednak małą część dostępnej pamięci RAM komputera. Dla operacji na dużych bazach to nie wystarcza, więc silnik MySQL wczytuje dane "na raty" i tworzy bufor na dysku. Skutkuje to kotastrofalnym spadkiem wydajności.
Zrozumienie funkcji poszczagólnych buforów nie jest łatwe, ale istnieją skrypty podpowiadające co zrobić. Poniżej jeden z nich

http://www.techerator.com/2011/08/optimize...l-tuner-script/

Ten post edytował bpskiba 14.07.2013, 11:52:40

[rocktech.pl]

Wykonujesz UPDATE zapewne z klauzulą WHERE? Tabela ma tylko jeden indeks id. Sprawdź czy przy zapytaniu jest wykorzystywany.
Jeśli wykonujesz UPDATE na milionach rekordów to będzie to trwało dłuuugo.

Zerknij jeszcze na PROCEDURE ANALYSE

[SQL] pobierz, plaintext 
SELECT * FROM `data` PROCEDURE ANALYSE(10000, 2000);
[SQL] pobierz, plaintext 

Ten post edytował rocktech.pl 14.07.2013, 12:11:40