#Tous les spiders peuvent crawler le site
User-Agent: *

#Sitemaps
Sitemap: http://www.diet-avenue.com/sitemap-boutique.xml
Sitemap: http://www.diet-avenue.com/sitemap-recette.xml
Sitemap: http://www.diet-avenue.com/sitemap-forum.xml
Sitemap: http://www.diet-avenue.com/sitemap-site.xml

#Interdiction d'acces a tous les spiders pour les dossier client ajax et admin 
Disallow: /cgi/client/