# robots.txt für www.farbdrachen.de # Diese Webcrawler schließe ich aus User-agent: Sidewinder Disallow: / User-agent: Microsoft.URL.Control Disallow: / # Diese Verzeichnisse/Dateien sollen nicht durchsucht werden User-agent: * Disallow: /bilder Disallow: /assets/cache Disallow: /assets/export Disallow: /assets/files Disallow: /assets/flash Disallow: /assets/galleries Disallow: /assets/images Disallow: /assets/import Disallow: /assets/js Disallow: /assets/media Disallow: /assets/modules Disallow: /Stardust74 Disallow: /logs Disallow: /cgi-bin Disallow: /manager Disallow: /usage Crawl-delay: 120