User-agent: * Disallow: Sitemap: http://www.gaestehaus-apfelbacher.de/sitemap.xml http://www.gaestehaus-apfelbacher.de/ 2008-11-11 weekly 0.5 # =================================== # Generator: http://pixelfolk.net/tools/robots # Erstellt am: 11.11.2008, 23:01 # Webseite: http://www.gaestehaus-apfelbacher.de # =================================== Crawl-delay: 5 Sitemap: http://www.gaestehaus-apfelbacher.de/sitemap.xml # =================================== # Folgende Seiten sollen nicht indexiert werden: # =================================== User-agent: * Disallow: /cgi-bin/ Disallow: /admin/ Disallow: /temp/ # =================================== # Schließe folgende Spider komplett aus: # =================================== User-agent: WebReaper User-agent: WebCopier User-agent: Offline Explorer User-agent: HTTrack User-agent: Microsoft.URL.Control User-agent: EmailCollector Disallow: /