Googlebot i inne roboty indeksujące - jak wykrywać, Indeksowanie stron z ograniczonym dostęp Opcje

[xPatryk]

Witam,

w jaki sposób skutecznie sprawdzić, czy strone odwiedza bot indeksujący jakiejś wyszukiwarki czy normalny użytkownik?

Chodzi mi o to, że większość stron w naszym serwisie (artykuły, forum, etc) jest dostępnych tylko dla zarejestrowanych użytkowników (rejestracja jest darmowa, nimniej wymagana ze względu na konieczność utrzymania wysokiego poziomu merytorycznego serwisu), ale zalezaloby nam na ich normalnym indeksowaniu przez wyszukiwarki, zwlaszcza, ze zawieraja wiele materialow niedostepnych nigdzie indziej w Polskim Internecie...


Tylko jak najlepiej sprawdzić, kto odwiedza stronę?

Pozdrawiam i proszę o pomoc
Patryk

[yavaho]

To juz jest cloaking. Ale jak sie uzywa tej techniki rozwaznie to nic takiego sie nie stanie. W przypadku stron ktore sa dostepne po zalogowaniu googiel nie bedzie mial mozliwosci porownania tych stron, bo nie dostanie sie na te strony jako przegladarka, ale i tak przeciez te strony nie zmienia tresci. Tresc zmieni sie na jednej stronie (jedna wystarczy aby zrobic wejscie) i ta strona bedzie sie roznila tylko tym ze dla bota wyswietli o jeden link wiecej - jezeli ta strona generowana jest dynamicznie i pojawiaja sie na tej stronie inne losowe linki to nawet nie bedzie mozliwosci porownania.

Problemy natomiast moga pojawic sie gdy to jakis dociekliwy gostek zauwazy. Np na stronie mamy zainstalowany system wymiany linków. Robot wtedy moze zainstalowac linki na stronie niedostepnej dla zwyklego uzytkownika. I wtedy administrator tego systemu wymiany linków lub inna dociekliwa osoba moze zauwazyc ze linki znajduja sie na stronach, ktore to strony wedlug niego nie istnieją.
I to moze byc odebrane jako generowanie duzych ilosci niepotrzebnych stron w celu jakby sztucznego "podwyzszenia wartosci" strony, gdy wartosc strony ocenia robot.

Ten post edytował yavaho 15.12.2005, 01:34:35