Witam,

Mamy problem z wydajnością wyszukiwania pełnotekstowego w serwisie aukcyjnym AUKCJE FM - ponad 700 000 rekordów aukcji.

Użyto funkcji match against + LEFT OUTER JOIN

Jak można zoptymalizować wyszukiwanie?

Oto kod

[PHP] pobierz, plaintext 
  $qs ="select count(*) as total FROM AUKCJE_auctions au
        LEFT OUTER JOIN AUKCJE_itemvariants iv
        ON au.id=iv.id
        WHERE ( au.suspended='0')
        AND ($wher au.private='n'  $ora)
        AND $varq
        AND au.starts<=".$NOW."
        ORDER BY $sort";
 
 
    $rsl = mysql_query ($qs);
    if($rsl) {
        $hash = mysql_fetch_array($rsl);
        $total = (int)$hash[0];
    } else { $total = 0; echo mysql_error(); }
 
    $TOTALAUCTIONS = $total;
    if(!isset($PAGE) || $PAGE == 1) {
        $OFFSET = 0;
        $PAGE = 1;
    } else {
        $OFFSET = ( $PAGE - 1) * $limit_aukcji;
    }
    $PAGES = ceil($TOTALAUCTIONS / $limit_aukcji);
 
    $qs ="select au.* FROM AUKCJE_auctions au
        LEFT OUTER JOIN AUKCJE_itemvariants iv
        ON au.id=iv.id
        WHERE ( au.suspended='0')
        AND ($wher au.private='n'  $ora)
        AND $varq
        AND au.starts<=".$NOW."
        ORDER BY $sort LIMIT ".intval($OFFSET).",".intval($limit_aukcji);
 
 
 
    $result = mysql_query ($qs);
    if(!isset($_SESSION["PHPAUCTION_LOGGED_IN"]) && (($location_radio=='3') || ($location_radio=='4'))) {
        $ERR = $text_574;
    } elseif($title == '') {
        $ERR = $text_660;
    } else {
        if(@mysql_num_rows($result) > 0) {
            include $include_path."browseitems.inc.php";
            $TPL_auctions_list_value=browseItems($result);
            $auctions_count=count($TPL_auctions_list_value);
 
            $TPL_auctions_total_value .="";
            if ($auctions_count==0) {
                $TPL_auctions_total_value = ""."$ERR_114";
            }
 
            foreach ($states as $key=>$val) {
                $TPL_states_list.= "	<OPTION VALUE='$val'";
                if($val==$state && $val != '') {
                    $TPL_states_list.= " SELECTED='true'";
                }
                $TPL_states_list.= " >".$val."</OPTION>\n";
            }
 
[PHP] pobierz, plaintext 

nikt nie ma pomysłu?

W Twoim kodzie nigdzie nie ma wyszukiwania pełnotekstowego. Jeśli znajduje się ono w $wher lub $varq to spróbuj przenieść to wyrażenie jako pierwszy warunek w wyszukiwaniu. Możesz również wkleić nam wynik EXPLAIN (czyli poprzedź wyszukiwanie słowem EXPLAIN).

Fakt, nie podałem dalszego kodu:

[PHP] pobierz, plaintext 
$varq.=")"; 
 
$title=iconv('utf-8',"iso-8859-2",$title);
 
if (($title ) && $_GET['go']!="ZnajdĽ wszystkie >") { //WHERE MATCH (Tytul,Tresc) AGAINST(?szukane słowo?)
 
    $title2=split(" ", $title);
	$wher .= "(";
 
		if(isset($_REQUEST['desc'])) {
			$wher .= "(MATCH(au.title, au.description) AGAINST('".addslashes(implode(',', $title2))."')) ";
		} else {
			$wher .= "(MATCH(au.title) AGAINST('".addslashes(implode(',', $title2))."')) ";
		}
		$wher .= " OR au.id=".intval($title).") AND ";
}
 
/*
if (($title ) && $_GET['go']!="ZnajdĽ wszystkie >") { //WHERE MATCH (Tytul,Tresc) AGAINST(?szukane słowo?)
 
    //if ($desc) 	$wher .= "((au.description like '%".addslashes($title)."%') ";
 
    $title2=split(" ", $title);
 
    for($i=0, $is=count($title2); $i<$is; $i++){
        if(strlen($title2[$i])>0){
            if($i){
                $title3.=" OR ";
                $title4.=" OR ";
            }
            $title3.="au.title like '%".$title2[$i]."%'";
            $title4.="au.description like '%".$title2[$i]."%'";
        }
    }
 
[PHP] pobierz, plaintext 

Rozbicie w każdej aukcji wyrazów w tytule i tekscie oraz wrzucenie ich do nowej tabeli np
ID_AUKCJI | WYRAZ (lower) | TYPE

Wyraz musi być trim() i strtolower() a w TYPE trzymany byłby typ (1-title, 2-text).

Wtedy proste WHERE IN powinno być w miarę szybko, a ty jako zwrot z bazy dostaniesz ID aukcji. I z tych ID pobierzesz reszte danych.

Pamiętaj tylko, że przy dodawaniu nowej aukcji albo jej edycji musisz uwzględniać nowe słowa kluczowe. A przy kasowaniu starych aukcji, należy je kasować.

To już raczej relacje powinny załatwić.

@topic
Dlaczego nie zastosujesz się do postu phpion ?