# =================================== # Generator: http://pixelfolk.net/tools/robots # Erstellt am: 29.07.2008, 13:18 # Webseite: http://projects.fslab.de # =================================== Crawl-delay: 10 # =================================== # Folgende Seiten sollen nicht indexiert werden: # =================================== User-agent: * Disallow: /cgi-bin/ Disallow: /admin/ Disallow: /temp/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector Disallow: /