Witaj Gościu! ( Zaloguj | Rejestruj )

Forum PHP.pl

 
Reply to this topicStart new topic
> plik robots ceneo w kosmos zrobiony, proszę o informacje
www.aukcje.fm
post 2.01.2013, 12:37:25
Post #1





Grupa: Zarejestrowani
Postów: 173
Pomógł: 1
Dołączył: 4.05.2010

Ostrzeżenie: (20%)
X----


Witam,

Chodzi o mega rozbudowany plik robots.txt serwisu ceneo. Czy ktoś umie wytłumaczyć poszczególne cechy w tym pliku?

(szczególnie wpisy) :

Disallow: /gotourl.aspx*
Disallow: /GotoURL.aspx*
Disallow: /;szukaj
Disallow: /;020*
Disallow: /ProductsComparison.aspx*

Disallow: /-*
Disallow: /+*
Disallow: /Kategoria*
Disallow: /Produkt-*
Disallow: /allegro*
Disallow: /*-0x-*
Disallow: /*-0a-*
Disallow: /PopupDisplay*
Disallow: /ProductsComparison.aspx*
Disallow: /;020*

I dlaczego zablokowane są wszystkie inne boty na dole?

pozdrawiam
Go to the top of the page
+Quote Post

Reply to this topicStart new topic
1 Użytkowników czyta ten temat (1 Gości i 0 Anonimowych użytkowników)
0 Zarejestrowanych:

 



RSS Wersja Lo-Fi Aktualny czas: 13.06.2025 - 03:39