Über MissWrenchBot

Wenn MissWrenchBot in Ihren Zugriffsprotokollen aufgetaucht ist, hat jemand eines der Werkzeuge dieser Website benutzt, um Ihre Adresse zu prüfen. Der Crawler streift nicht von selbst durchs Web und baut keinen Index auf.

Was er anfordert

Eine typische Prüfung lädt eine Seite und manchmal die Dateien, auf die diese Seite verweist, etwa Stylesheets, Skripte und Bilder, um Größe, Header oder Caching zu messen. Der Finder für tote Links folgt Links innerhalb einer einzigen Website. Er lässt sich Zeit und hört nach einer festen Anzahl Seiten auf.

Wie er sich ausweist

Anfragen tragen diesen User-Agent:

Mozilla/5.0 (compatible; MissWrenchBot/1.0; +https://misswrench.com/crawler/)

Ihn aussperren

Der Link-Finder hält sich an robots.txt. Um ihn auszuschließen, fügen Sie hinzu:

User-agent: MissWrenchBot
Disallow: /

Prüfungen einzelner Seiten erfolgen im Auftrag eines Menschen, der sich Ihre Website ansieht, und verhalten sich wie ein Browserbesuch.