User-agent: *
Disallow:

# Autorise l'exploration totale du site
Allow: /

# Sitemap principal
Sitemap: https://dreamfr.com/sitemap.xml

# Empêche l'exploration de fichiers inutiles
Disallow: /assets/*.psd
Disallow: /assets/*.ai
Disallow: /assets/*.zip
Disallow: /assets/*.rar
Disallow: /private/
Disallow: /temp/

# Autorise les fichiers essentiels
Allow: /assets/
Allow: /styles.css

# Optimisation SEO
# Encourage Google à crawler le site souvent (n’influence pas Google directement mais bonne pratique)
Crawl-delay: 5

# Protéger contre les robots malveillants connus (sécurité)
User-agent: MJ12bot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: SEMrushBot
Disallow: /