blackholebots

Blackhole for Bad Bots protegge il tuo negozio PrestaShop da crawler e scraper malevoli che ignorano le direttive del tuo robots.txt. Funziona incorporando un link nascosto su ogni pagina del tuo negozio che punta a un URL proibito. I robot ben educati che seguono il robots.txt non visiteranno mai questo link, ma i bot malevoli che ignorano le regole di crawling attiveranno la trappola — e i loro indirizzi IP verranno automaticamente aggiunti a una blacklist, bloccandoli permanentemente dall'accesso al tuo sito.

• Banna automaticamente i bot che accedono a un URL proibito nascosto inserito nel tuo sito
• Invia all'amministratore del negozio una notifica via email per ogni nuova voce nella blacklist, inclusi dati WHOIS come indirizzo IP, posizione e informazioni di rete
• Il link nascosto è invisibile ai normali visitatori umani ma completamente visibile ai crawler nel sorgente della pagina
• Richiede una modifica manuale una tantum al robots.txt prima dell'installazione per istruire i bot conformi a evitare l'URL della trappola
• Gli IP nella blacklist possono essere rimossi manualmente dalla tabella del database PREFIX_blackholebots_blacklist

Questo modulo è una soluzione semplice per i proprietari di negozi infastiditi da scraper aggressivi o non conformi che consumano risorse del server o raccolgono dati sui prodotti. È più adatto agli amministratori che si sentono a proprio agio nell'effettuare una piccola modifica al robots.txt e, se necessario, nell'eseguire occasionali aggiustamenti manuali del database per gestire la blacklist.