Witaj Gościu! ( Zaloguj | Rejestruj )

Forum PHP.pl

> Prośba o pomoc przy optymalizacji zapytania
grzemach
post
Post #1





Grupa: Zarejestrowani
Postów: 121
Pomógł: 4
Dołączył: 9.06.2007
Skąd: Kielce

Ostrzeżenie: (0%)
-----


Witam,
W bazie mam ok 1,3mln rekordów, jest dosyć dużo zapytań, acz nie trwają one długo bo ok 4s każde. Niestety suma sumarum, zapytania te przeciążają bazę mojego hostingodawcy - i często strona jest niedostępna. A że głównie to się dzieje przy odwiedzających botach...

tabele są dwie, ale zapytanie o które mi się rozchodzi nawiązuje tylko do jednej:
  1. CREATE TABLE `PageRankHosts` (
  2. `id` int(10) UNSIGNED NOT NULL AUTO_INCREMENT,
  3. `link` varchar(150) character SET utf8 collate utf8_unicode_ci DEFAULT NULL,
  4. `pr` tinyint(4) DEFAULT '0',
  5. `created` int(10) UNSIGNED NOT NULL DEFAULT '0',
  6. `fileWithDomains` int(10) UNSIGNED NOT NULL DEFAULT '0',
  7. `statusCreated` varchar(50) character SET utf8 collate utf8_unicode_ci DEFAULT NULL,
  8. `statusNow` varchar(50) character SET utf8 collate utf8_unicode_ci NOT NULL DEFAULT '',
  9. `domainCreated` int(10) UNSIGNED NOT NULL DEFAULT '0',
  10. `lastMod` int(10) UNSIGNED NOT NULL DEFAULT '0',
  11. `optionInfo` varchar(55) character SET utf8 collate utf8_unicode_ci NOT NULL,
  12. `registerIn` text character SET utf8 collate utf8_unicode_ci NOT NULL,
  13. `lastUpdate` int(10) UNSIGNED NOT NULL DEFAULT '0',
  14. `text` tinyint(3) UNSIGNED DEFAULT '0',
  15. `status` tinyint(3) UNSIGNED NOT NULL DEFAULT '3',
  16. `fullWhoIS` text character SET utf8 collate utf8_unicode_ci NOT NULL,
  17. `zwolniona` int(10) UNSIGNED NOT NULL DEFAULT '0',
  18. PRIMARY KEY (`id`),
  19. KEY `link` (`link`),
  20. KEY `created` (`created`),
  21. KEY `pr` (`pr`)
  22. );


Przykładowe zapytanie wygląda tak:
  1. SELECT * FROM PageRankHosts ORDER BY `created` DESC, `pr` DESC LIMIT 926100,30


Jeśli wstawię zamiast * kolumny które mnie interesują (w sumie wszystkie) - nie ma różnicy. Różnica jest gdy usunę "order by", ale przy usunięciu pr, jest to ok 1s, jednak jest to rozwiązanie nie do końca satysfakcjonujące, bo tracę całość sortowania, przenieść sortowanie do PHP? Owszem, ale wyciąganie >200MB danych z bazy do php i tam obrabianie, nie będzie szybsze. Nawet wyciągnięcie samych tych dwóch kolumn nie usprawni tego, bo później trzeba dociągnąć pozostałe dane.

Proszę o wszystkie sugestie.

Ten post edytował grzemach 10.03.2011, 23:36:03
Go to the top of the page
+Quote Post
 
Start new topic
Odpowiedzi
grzemach
post
Post #2





Grupa: Zarejestrowani
Postów: 121
Pomógł: 4
Dołączył: 9.06.2007
Skąd: Kielce

Ostrzeżenie: (0%)
-----


  1. id select_type TABLE type possible_keys KEY key_len ref rows Extra
  2. 1 SIMPLE PageRankHosts ALL NULL NULL NULL NULL 1245506 USING filesort

Cytat
Wstępnie: baza musi zrobić full scan i później zrobić sorty - gdzie indeksy się na nic nie zdają (w tym przypadku)

Wiem, że musi zrobić full skan (sortowanie) i to 2 razy (dwa sortowania). Ale nie mam pomysłu jak przy takiej ilości danych to można by zoptymalizować. Może przerobić bazę, albo wybierać całość danych z bazy i przerabiać w PHP (ale to wydaje się bardzo głupim i złym pomysłem, który nie wierzę że zadziała szybciej).

Może by zmienić tym bazy na innoDB z MyISAM, ale jak widziałem testy wydajności to w tak prostych zapytaniach (bez transakcji) - myisam jest szybsza.

Ten post edytował grzemach 14.03.2011, 12:36:55
Go to the top of the page
+Quote Post

Posty w temacie


Reply to this topicStart new topic
1 Użytkowników czyta ten temat (1 Gości i 0 Anonimowych użytkowników)
0 Zarejestrowanych:

 



RSS Aktualny czas: 5.10.2025 - 07:38