# robots.txt zu http://www.3gang.de/ # Infos zu 'robots.txt' hier: http://de.selfhtml.org/diverses/robots.htm # exclude help system from robots User-agent: * Disallow: / # Durch eine fehlende Angabe hinter Disallow: wird alles erlaubt! # Disallow: # Mit / bestimmen Sie "alle Daten dieses Verzeichnisses und aller Unterverzeichnisse" # Disallow: / # disallow stress test user-agent: stress-agent Disallow: / # Benutzen Sie im Zweifelsfall so viel wie möglich die Angabe Disallow: und so wenig wie möglich die Angabe Allow: # Allow: /