#Tous les spiders peuvent crawler le site
User-Agent: *

#Interdiction d'acces a tous les spiders pour les dossier client ajax et admin 
Disallow: /client/
Disallow: /ajax/

#Sitemap: http://www.diet-avenue.com/sitemap.xml







User-agent: Curl
Disalow : /