# robots.txt for http://www.site.com/
User-agent: * # Alle Suchmaschinen werden angesprochen
Disallow: /texte/ # Sperrung eines bestimmten Bereiches