Witaj Gościu! ( Zaloguj | Rejestruj )

Forum PHP.pl

 
Reply to this topicStart new topic
> [inne]robots.txt - blokada robotów
marcinek37
post 16.09.2013, 12:44:54
Post #1





Grupa: Zarejestrowani
Postów: 239
Pomógł: 0
Dołączył: 2.06.2011

Ostrzeżenie: (0%)
-----


Chcę zablokować dwa roboty, dając możliwość wszystkim innym na indeksację strony, czy ten kod jest dobry?

User-agent: *
Allow: /

User-agent: AhrefsBot
Disallow: /

User-agent: bingbot
Disallow: /
Go to the top of the page
+Quote Post
pedro84
post 16.09.2013, 13:55:48
Post #2





Grupa: Nieautoryzowani
Postów: 2 249
Pomógł: 305
Dołączył: 2.10.2006

Ostrzeżenie: (0%)
-----


Składnia jest ok, musisz tylko wziąć pod uwagę, że nie wszystkie boty biorą pod uwagę wpisy w pliku robots.txt.


--------------------
Google knows the answer...
Go to the top of the page
+Quote Post

Reply to this topicStart new topic
1 Użytkowników czyta ten temat (1 Gości i 0 Anonimowych użytkowników)
0 Zarejestrowanych:

 



RSS Wersja Lo-Fi Aktualny czas: 14.08.2025 - 00:34