#Verzeichnisse und Dateien vor Crawlern verstecken User-agent: * Disallow: /old_crinitz_web/ # alte Page Disallow: /backups/ # Backup-Verzeichnis für alte Sites