# $Id: robots.txt,v 1.0 06/11/08 12:02:18 D. Gaasbeek Exp $ # # robots.txt # # Dit bestand zorgt ervoor dat subpagina's niet worden opgenomen door spiders. # Dit is erg belangrijk i.v.m. beveiliging. # Verander daarom niets aan dit document. # # Dit bestand dient in de ROOT van de host te staan: # Zo dus: http://example.com/robots.txt # Zo niet: http://example.com/site/robots.txt User-agent: * Crawl-delay: 10 # Directories Disallow: /argeweb/ Disallow: /brillen/ Disallow: /configuratie/ Disallow: /css/ Disallow: /images/ Disallow: /js/ Disallow: /lenzen/ Disallow: /mini-scripts/ Disallow: /upload-bin/ Disallow: /uploads/ Disallow: /xpanel/ Disallow: /nieuwsbrief/ Disallow: /portal/ # Files Disallow: /actie.php Disallow: /actieoverzicht.php Disallow: /brillen.php Disallow: /contact.php Disallow: /force-download.php Disallow: /home.php Disallow: /lenzen.php Disallow: /login.php Disallow: /nieuws.php Disallow: /nieuwsoverzicht.php Disallow: /nieuwsbrief2.php Disallow: /service.php Disallow: /team.php Disallow: /voorwaarden.php Disallow: /zorg.php Disallow: /nieuwsbrief.php Disallow: /aanmaken-account.php Disallow: /wachtwoord-recovery.php Disallow: /client-login.php Disallow: /xml.php Disallow: /rss.php