 [PHP]Projekt robota indeksującego treść |
  |
| [PHP]Projekt robota indeksującego treść |
Post
#1
|
|
|
Grupa: Zarejestrowani Postów: 350 Pomógł: 31 Dołączył: 23.05.2010 Ostrzeżenie: (0%) 
 |
Cześć.
Chcę zrealizować projekt wyszukiwarki indeksującej treść danej strony internetowej. Ogólnie zarys projektu mam mniej więcej w głowie, ale nie wiem jak miałbym wykonać - przechodzenie na inne podstrony; Bot znalazł link prowadzący do innej podstrony serwisu (np. domena.pl/artykuly.html ==> domena.pl/artykuly,2.html (następna strona)) w jaki sposób powinienem go przenieść tam? Mówię tutaj o prostym bocie napisanym nawet w języku php - nie chce zaawansowanych algorytmów; nie tworze drugiej wyszukiwarki Google ;-) |
 |
 
|
|
Post
#2
|
|
|
Grupa: Zarejestrowani Postów: 6 476 Pomógł: 1306 Dołączył: 6.08.2006 Skąd: Kraków Ostrzeżenie: (0%)
|
Po pierwsze to algorytmy nie są zależne od języka.
Ogólna zasada działania jest dosyć prosta: 1. Pobierasz źródło strony. 2. Analizujesz je pod różnymi kątami - indeksujesz treść, wyszukujesz linki do innych (pod)stron itp. itd. Tutaj przyda Ci się DOMDocument. 3. Powtarzasz cały proces dla nowych podstron, których adresy zdobyłeś w punkcie drugim. |
|
|
|
|
|
Aktualny czas: 12.10.2025 - 10:53 |
