Witam,
Blokuję na serwisach w htaccess:
SetEnvIfNoCase User-Agent "^wget" bad_bot
<Limit GET POST>
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Limit>
Wiadomo aby zablokować masowe pobieranie treści prostymi parserami.
Ale crontab z innego serwera się nie łączy z jednego IP rówież gdyż komendy są z Wget
Czy da się jakoś zrobić wyjątek dla jednego IP który uruchamia systemy cron?