Plik .htaccess jest plikiem konfiguracyjnym, który pozwala na zmianę ustawień serwera Apache na poziomie folderu. Możesz użyć reguł w pliku .htaccess, aby zablokować niechciane boty odwiedzające stronę internetową. Oto kilka przykładów reguł, które możesz dodać do pliku .htaccess:
1. Blokowanie botów z określonego adresu IP:
Deny from 111.222.333.444
2. Blokowanie botów z całej sieci:
Deny from 111.222.333.0/24
3. Blokowanie botów z określonej nazwy:
SetEnvIfNoCase User-Agent "badbot" bad_bot
Order Allow,Deny
Allow from all
Deny from env=bad_bot
4. Blokowanie botów, które wysyłają nieodpowiednie nagłówki:
SetEnvIfNoCase ^User-Agent$ .*(libwww-perl|aesop_com_spiderman) HTTP_SAFE_BADBOT
Deny from env=HTTP_SAFE_BADBOT
Pamiętaj, że reguły w pliku .htaccess są silnym narzędziem, które pozwala na zmianę ustawień serwera Apache. Upewnij się, że rozumiesz, jak działają poszczególne reguły i że są one prawidłowo skonfigurowane, aby uniknąć błędów lub problemów z działaniem strony internetowej.