# /robots.txt file for http://www.kafkamedia.de/ # # dieser darf alles # User-agent: webcrawler # Disallow: #User-agent: lycra #Disallow: / User-agent: * # Alle Suchmaschinen werden angesprochen Disallow: /images/ # Sperrung eines bestimmten Bereiches Disallow: /admin/ Disallow: /tests/ Disallow: /inc/ Disallow: /mail/ Disallow: /common.inc.php # Sperrung einer bestimmten Datei Disallow: /404.htm # Sperrung einer bestimmten Datei # Here's our honey-pot directory, which doesn't actually exist. Disallow: /email-addresses/