# Configfile für Crawler nach Exclusion Standard # http://de.wikipedia.org/wiki/Robots_Exclusion_Standard # Ganze Site freigeben User-agent: * Disallow: