Informazioni su MissWrenchBot
Se MissWrenchBot è comparso nei tuoi log di accesso, qualcuno ha usato uno degli strumenti di questo sito per controllare il tuo indirizzo. Il crawler non gira per il web da solo e non costruisce nessun indice.
Cosa richiede
Un controllo tipico carica una pagina e a volte i file a cui quella pagina fa riferimento, come fogli di stile, script e immagini, per misurare dimensioni, header o cache. Il cercatore di link rotti segue i link all’interno di un solo sito. Se la prende con calma e si ferma a un numero fisso di pagine.
Come si identifica
Le richieste portano questo user agent:
Mozilla/5.0 (compatible; MissWrenchBot/1.0; +https://misswrench.com/crawler/)
Tenerlo fuori
Il cercatore di link rispetta robots.txt. Per escluderlo, aggiungi:
User-agent: MissWrenchBot
Disallow: /I controlli su una singola pagina vengono fatti per conto di una persona che guarda il tuo sito e si comportano come una visita da browser.