# Alle Roboter ausschließen #User-agent: * #Disallow: / #Alle Roboter einladen #Eine leere Datei erfüllt den gleichen Zweck User-agent: * Disallow: #Alle Roboter von bestimmten Verzeichnissen fernhalten User-agent: * Disallow: /webalizer/ Disallow: /cgi-bin/ Disallow: /datenpflege/ Disallow: /counter/