#robots.txt for http://www.buitensportmarkt.nl/ User-agent: * Disallow: /admin Disallow: /awstats Disallow: /cgibin Disallow: /webanalyse Disallow: /temp Disallow: /oud/ #indexeer niets dat begint met /temp; dus NIET /temp/index.html en NIET /temp.html Disallow: /temp/ #indexeer niets dat begint met /temp/; dus NIET /temp/index.html, maar WEL /temp.html