|
Beschreibung: Viele Webcrawler ziehen sich ungefragt den Webinhalt vieler Seiten. Um einen Missbrauch vorzubeugen gibt es ein kostenloses Tool namens Spider Trap. Dieses kann leicht installiert werden und von der Seite kostenlos heruntergeladen werden.
Keywords: Spider Trap, Robots aussperren, Bot Trap, Webcrawler ausschliessen, htaccess sperren
Eingetragen am: 21.04.2006
Link: http://www.spider-trap.de
|
