Piszemy własna wyszukiwarkę, proszę o pomoc Opcje

[Landon]

Operuje na bazie danych mysql i wystukałem dość prostego spidera który pobiera treść linki i takie tam z stron. Następnie zapisuje słowa kluczowe i ustalam ich silę przez ilość powtórzeń na stronach... Dodałem bazę słów i najpopularniejszych sformułowań i włączyłem spidera... Jak na razie 95460 stron. No i teraz nasuwa się pytanie czy dobrze zrobiłem sprawdzając poprawność wpisanego tekstu?

[PHP] pobierz, plaintext 
<?php
function podobne() {
  $licz = strlen($this -> slowo);
  if ($licz > 2) {
	if (substr($this -> slowo,0,7) != "http://") {
	  $shortest = -1;
	  $query = $this -> db_mysql -> query("SELECT * FROM {{table}} where w>1", "keywords");
	  while($row = $this -> db_mysql -> fetch_array($query)) {
		$lev = levenshtein($this -> slowo, $row['name']);
		if ($lev == 0) {
		  $closest = $row['name'];
		  $shortest = 0;
		  break;
		}
		if ($lev <= $shortest || $shortest < 0) {
		  $closest  = $row['name'];
		  $shortest = $lev;
		}
	  }
	}
  } else {
	$shortest = 0;
  }
  return ($shortest != 0) ? 'Czy chodziło Ci o: <a href="?q='.$closest.'">'.$closest.'</a><br>' : '<br>';
}
?>
[PHP] pobierz, plaintext 

Czy może istnieje lepszy sposób wszystko jest na serwie z PHP5 i jest to część klasy szukaj....
Musze wykorzystać similar_text lub levenshtein (tyle na razie wiem)
Następnym problemem na jaki się natknąłem był brak odnośnika według którego strony miały by być układane więc zrobiłem tymczasowo tak:
Nowo zindeksowana strona o ile ma odnośnik do n strony dodaje +1 do pola link według którego ustawione są wyniki

[HTML] pobierz, plaintext 
Dobra ale zacznijmy od początku jak powinniśmy się za to zabrać:
1. Musimy się zorientować co nam będzie potrzebne (które dane z strony musimy pobrać)...
2. Powinniśmy zastosować system szablonów, jakąś klasę obsługi bazy danych, no i 2 klasy jedna wyszukującą 2 indeksującą...
3. Zaczynamy od klasy wyszukującej:
...a) Tworzymy tabelę z stronami
...B) Tworzymy funkcję do skracania tekstu
...c) Tworzymy funkcje do pogrubiania tekstu zgodnego z słowem kluczowym
...d) Dodajemy pętle wyświetlającą 
...e) No i licznik stron | można jeszcze ile jest stron pod wskazanym hasłem
...f) Teraz czas na funkcję podpowiadającą gdy popełnimy błąd...
[HTML] pobierz, plaintext 

cdn...

Ma ktoś jakąś dobrą bazę słów i sformułowań do podpowiedzi?

Następnym pytaniem było jak pobrać zawartość strony:
istnieje funkcja file_get_contents lecz nie wiem dlaczego nie zawsze ona działa

lub

[PHP] pobierz, plaintext 
<?php
function open($urls) {
  $uchwyt = fopen($urls, "rb");
  $tresc = stream_get_contents($uchwyt);
  fclose($uchwyt);
}
?>
[PHP] pobierz, plaintext 

Ten post edytował Landon 7.05.2008, 22:24:33