# robots datei zu meinem web. legt fest, wie suchmaschinen auf Dateien zugreifen können. # verhinderung des zugriffes auf bestimmte verzeichnisse # erläuterung zu dieser datei bei selfhtml zu finden # muster für Benutzung: # User-agent: UniservalRobot/1.0 # User-agent: mein-Robot # Disallow: /quellen/dtd/ # Allow: /quellen/dtd/index.html User-agent: * Disallow: /garten/ Disallow: /garten.htm