User-agent: Baiduspider
Disallow: /

User-agent: bingbot
Disallow: /*

User-agent: msnbot
Disallow: /*

User-agent: Slurp
Disallow: /*

User-agent: BLEXBot
Disallow: /*

User-agent: MJ12bot
Disallow: /*

User-agent: *
Disallow: /cgi-bin/
Disallow: /tmp/
Disallow: /private/
Crawl-Delay: 2 

# /en/classic
Disallow: /en/classic/checkout/cart/
Disallow: /en/classic/checkout/
Disallow: /en/classic/checkout/onepage/
Disallow: /en/classic/catalog/product_compare/

# /en/modern
Disallow: /en/modern/checkout/cart/
Disallow: /en/modern/checkout/
Disallow: /en/modern/checkout/onepage/
Disallow: /en/modern/catalog/product_compare/

# /fr/classique
Disallow: /fr/classique/checkout/cart/
Disallow: /fr/classique/checkout/
Disallow: /fr/classique/checkout/onepage/
Disallow: /fr/classique/catalog/product_compare/

# /fr/moderne
Disallow: /fr/moderne/checkout/cart/
Disallow: /fr/moderne/checkout/
Disallow: /fr/moderne/checkout/onepage/
Disallow: /fr/moderne/catalog/product_compare/

# Allowable Index
Allow: /fr/moderne/*?p=
Allow: /fr/moderne/catalog/seo_sitemap/category/
Allow: /fr/moderne/catalogsearch/result/ 

Disallow: /fr/moderne/app/
Disallow: /fr/moderne/cgi-bin/
Disallow: /fr/moderne/downloader/
Disallow: /fr/moderne/errors/
Disallow: /fr/moderne/includes/
Disallow: /fr/moderne/js/
Disallow: /fr/moderne/lib/
Disallow: /fr/moderne/magento/
Disallow: /fr/moderne/media/
Disallow: /fr/moderne/pkginfo/
Disallow: /fr/moderne/report/
Disallow: /fr/moderne/scripts/
Disallow: /fr/moderne/shell/
Disallow: /fr/moderne/skin/
Disallow: /fr/moderne/stats/
Disallow: /fr/moderne/var/

# Paths (clean URLs)
Disallow: /fr/moderne/catalog/product_compare/
Disallow: /fr/moderne/catalog/category/view/
Disallow: /fr/moderne/catalog/product/view/
Disallow: /fr/moderne/catalogsearch/
Disallow: /fr/moderne/checkout/
Disallow: /fr/moderne/control/
Disallow: /fr/moderne/contacts/
Disallow: /fr/moderne/customer/
Disallow: /fr/moderne/customize/
Disallow: /fr/moderne/newsletter/
Disallow: /fr/moderne/poll/
Disallow: /fr/moderne/review/
Disallow: /fr/moderne/sendfriend/
Disallow: /fr/moderne/tag/
Disallow: /fr/moderne/wishlist/

# Files
Disallow: /fr/moderne/cron.php
Disallow: /fr/moderne/cron.sh
Disallow: /fr/moderne/error_log
Disallow: /fr/moderne/install.php
Disallow: /fr/moderne/LICENSE.html
Disallow: /fr/moderne/LICENSE.txt
Disallow: /fr/moderne/LICENSE_AFL.txt
Disallow: /fr/moderne/STATUS.txt

# Allowable Index
Allow: /fr/classique/*?p=
Allow: /fr/classique/catalog/seo_sitemap/category/
Allow: /fr/classique/catalogsearch/result/ 

Disallow: /fr/classique/app/
Disallow: /fr/classique/cgi-bin/
Disallow: /fr/classique/downloader/
Disallow: /fr/classique/errors/
Disallow: /fr/classique/includes/
Disallow: /fr/classique/js/
Disallow: /fr/classique/lib/
Disallow: /fr/classique/magento/
Disallow: /fr/classique/media/
Disallow: /fr/classique/pkginfo/
Disallow: /fr/classique/report/
Disallow: /fr/classique/scripts/
Disallow: /fr/classique/shell/
Disallow: /fr/classique/skin/
Disallow: /fr/classique/stats/
Disallow: /fr/classique/var/

# Paths (clean URLs)
Disallow: /fr/classique/catalog/product_compare/
Disallow: /fr/classique/catalog/category/view/
Disallow: /fr/classique/catalog/product/view/
Disallow: /fr/classique/catalogsearch/
Disallow: /fr/classique/checkout/
Disallow: /fr/classique/control/
Disallow: /fr/classique/contacts/
Disallow: /fr/classique/customer/
Disallow: /fr/classique/customize/
Disallow: /fr/classique/newsletter/
Disallow: /fr/classique/poll/
Disallow: /fr/classique/review/
Disallow: /fr/classique/sendfriend/
Disallow: /fr/classique/tag/
Disallow: /fr/classique/wishlist/

# Files
Disallow: /fr/classique/cron.php
Disallow: /fr/classique/cron.sh
Disallow: /fr/classique/error_log
Disallow: /fr/classique/install.php
Disallow: /fr/classique/LICENSE.html
Disallow: /fr/classique/LICENSE.txt
Disallow: /fr/classique/LICENSE_AFL.txt
Disallow: /fr/classique/STATUS.txt

# Allowable Index
Allow: /en/modern/*?p=
Allow: /en/modern/catalog/seo_sitemap/category/
Allow: /en/modern/catalogsearch/result/ 

Disallow: /en/modern/404/
Disallow: /en/modern/app/
Disallow: /en/modern/cgi-bin/
Disallow: /en/modern/downloader/
Disallow: /en/modern/errors/
Disallow: /en/modern/includes/
Disallow: /en/modern/js/
Disallow: /en/modern/lib/
Disallow: /en/modern/magento/
Disallow: /en/modern/media/
Disallow: /en/modern/pkginfo/
Disallow: /en/modern/report/
Disallow: /en/modern/scripts/
Disallow: /en/modern/shell/
Disallow: /en/modern/skin/
Disallow: /en/modern/stats/
Disallow: /en/modern/var/

# Paths (clean URLs)
Disallow: /en/modern/catalog/product_compare/
Disallow: /en/modern/catalog/category/view/
Disallow: /en/modern/catalog/product/view/
Disallow: /en/modern/catalogsearch/
Disallow: /en/modern/checkout/
Disallow: /en/modern/control/
Disallow: /en/modern/contacts/
Disallow: /en/modern/customer/
Disallow: /en/modern/customize/
Disallow: /en/modern/newsletter/
Disallow: /en/modern/poll/
Disallow: /en/modern/review/
Disallow: /en/modern/sendfriend/
Disallow: /en/modern/tag/
Disallow: /en/modern/wishlist/

# Files
Disallow: /en/modern/cron.php
Disallow: /en/modern/cron.sh
Disallow: /en/modern/error_log
Disallow: /en/modern/install.php
Disallow: /en/modern/LICENSE.html
Disallow: /en/modern/LICENSE.txt
Disallow: /en/modern/LICENSE_AFL.txt
Disallow: /en/modern/STATUS.txt

# Allowable Index
Allow: /en/classic/*?p=
Allow: /en/classic/catalog/seo_sitemap/category/
Allow: /en/classic/catalogsearch/result/ 

# Directories
Disallow: /en/classic/app/
Disallow: /en/classic/cgi-bin/
Disallow: /en/classic/downloader/
Disallow: /en/classic/errors/
Disallow: /en/classic/includes/
Disallow: /en/classic/js/
Disallow: /en/classic/lib/
Disallow: /en/classic/magento/
Disallow: /en/classic/media/
Disallow: /en/classic/pkginfo/
Disallow: /en/classic/report/
Disallow: /en/classic/scripts/
Disallow: /en/classic/shell/
Disallow: /en/classic/skin/
Disallow: /en/classic/stats/
Disallow: /en/classic/var/

# Paths (clean URLs)
Disallow: /en/classic/catalog/product_compare/
Disallow: /en/classic/catalog/category/view/
Disallow: /en/classic/catalog/product/view/
Disallow: /en/classic/catalogsearch/
Disallow: /en/classic/checkout/
Disallow: /en/classic/control/
Disallow: /en/classic/contacts/
Disallow: /en/classic/customer/
Disallow: /en/classic/customize/
Disallow: /en/classic/newsletter/
Disallow: /en/classic/poll/
Disallow: /en/classic/review/
Disallow: /en/classic/sendfriend/
Disallow: /en/classic/tag/
Disallow: /en/classic/wishlist/

# Files
Disallow: /en/classic/cron.php
Disallow: /en/classic/cron.sh
Disallow: /en/classic/error_log
Disallow: /en/classic/install.php
Disallow: /en/classic/LICENSE.html
Disallow: /en/classic/LICENSE.txt
Disallow: /en/classic/LICENSE_AFL.txt
Disallow: /en/classic/STATUS.txt