# robots.txt for http://www.pavlek.de # Legende # Erstellt am 18-3-1999 # Author Milorad Pavlek # Sonstiges User-agent: * # alle Suchmaschinen werden angesprochen Disallow: /mmpriv/ # private Seiten von Meli und Milo werden für Suchmaschienen nicht zugelassen Disallow: /_private/ disallow: /_fpclass/ Disallow: /_borders/ Disallow: /_themes/ # Legende # für jedes Argument muss eine neue Zeile erstellt werden # Syntax für User-agent ist "*" für alle Suchroboter # oder z.B. "cybermapper" für den Suchroboter cybermapper. eine Liste der Suchroboter liegt # unter http://www.webcrawler.com/mak/projects/robots/active.html zum Abruf bereit # mit Disallow: werden die Verzeichnisse mit /verzeichnis/ angegeben, oder mit / alle ! # alle mit / sollten jedoch nur in besonderen webseiten verwendet werden