# for development #User-agent: * #Disallow: / User-agent: * Crawl-Delay: 15 # Wartezeit zwischen den Seitenabrufen Disallow: /public/ # Dokumente im public ordner duerfen allgemain nicht indiziert werden Disallow: /__ # Pfade beginnend mit __ verstecken