# robots.txt automatically generated by PrestaShop e-commerce open-source solution
# https://www.prestashop.com - https://www.prestashop.com/forums
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
# For more information about the robots.txt standard, see:
# https://www.robotstxt.org/robotstxt.html
User-agent: *
# Allow Directives
Allow: */modules/*.css
Allow: */modules/*.js
Allow: */modules/*.png
Allow: */modules/*.jpg
Allow: */modules/*.gif
Allow: */modules/*.svg
Allow: */modules/*.webp
Allow: /js/jquery/*
# Private pages
Disallow: /*?order=
Disallow: /*?tag=
Disallow: /*?id_currency=
Disallow: /*?search_query=
Disallow: /*?back=
Disallow: /*?n=
Disallow: /*&order=
Disallow: /*&tag=
Disallow: /*&id_currency=
Disallow: /*&search_query=
Disallow: /*&back=
Disallow: /*&n=
Disallow: /*controller=addresses
Disallow: /*controller=address
Disallow: /*controller=authentication
Disallow: /*controller=cart
Disallow: /*controller=discount
Disallow: /*controller=footer
Disallow: /*controller=get-file
Disallow: /*controller=header
Disallow: /*controller=history
Disallow: /*controller=identity
Disallow: /*controller=images.inc
Disallow: /*controller=init
Disallow: /*controller=my-account
Disallow: /*controller=order
Disallow: /*controller=order-slip
Disallow: /*controller=order-detail
Disallow: /*controller=order-follow
Disallow: /*controller=order-return
Disallow: /*controller=order-confirmation
Disallow: /*controller=pagination
Disallow: /*controller=password
Disallow: /*controller=pdf-invoice
Disallow: /*controller=pdf-order-return
Disallow: /*controller=pdf-order-slip
Disallow: /*controller=product-sort
Disallow: /*controller=registration
Disallow: /*controller=search
Disallow: /*controller=statistics
Disallow: /*controller=attachment
Disallow: /*controller=guest-tracking
# Directories for librairie.lapin.org
Disallow: /app/
Disallow: /cache/
Disallow: /classes/
Disallow: /config/
Disallow: /controllers/
Disallow: /download/
Disallow: /js/
Disallow: /localization/
Disallow: /log/
Disallow: /mails/
Disallow: /modules/
Disallow: /override/
Disallow: /pdf/
Disallow: /src/
Disallow: /tools/
Disallow: /translations/
Disallow: /upload/
Disallow: /var/
Disallow: /vendor/
Disallow: /webservice/
Disallow: /fr/app/
Disallow: /fr/cache/
Disallow: /fr/classes/
Disallow: /fr/config/
Disallow: /fr/controllers/
Disallow: /fr/download/
Disallow: /fr/js/
Disallow: /fr/localization/
Disallow: /fr/log/
Disallow: /fr/mails/
Disallow: /fr/modules/
Disallow: /fr/override/
Disallow: /fr/pdf/
Disallow: /fr/src/
Disallow: /fr/tools/
Disallow: /fr/translations/
Disallow: /fr/upload/
Disallow: /fr/var/
Disallow: /fr/vendor/
Disallow: /fr/webservice/
Disallow: /en/app/
Disallow: /en/cache/
Disallow: /en/classes/
Disallow: /en/config/
Disallow: /en/controllers/
Disallow: /en/download/
Disallow: /en/js/
Disallow: /en/localization/
Disallow: /en/log/
Disallow: /en/mails/
Disallow: /en/modules/
Disallow: /en/override/
Disallow: /en/pdf/
Disallow: /en/src/
Disallow: /en/tools/
Disallow: /en/translations/
Disallow: /en/upload/
Disallow: /en/var/
Disallow: /en/vendor/
Disallow: /en/webservice/
Disallow: /de/app/
Disallow: /de/cache/
Disallow: /de/classes/
Disallow: /de/config/
Disallow: /de/controllers/
Disallow: /de/download/
Disallow: /de/js/
Disallow: /de/localization/
Disallow: /de/log/
Disallow: /de/mails/
Disallow: /de/modules/
Disallow: /de/override/
Disallow: /de/pdf/
Disallow: /de/src/
Disallow: /de/tools/
Disallow: /de/translations/
Disallow: /de/upload/
Disallow: /de/var/
Disallow: /de/vendor/
Disallow: /de/webservice/
Disallow: /nl/app/
Disallow: /nl/cache/
Disallow: /nl/classes/
Disallow: /nl/config/
Disallow: /nl/controllers/
Disallow: /nl/download/
Disallow: /nl/js/
Disallow: /nl/localization/
Disallow: /nl/log/
Disallow: /nl/mails/
Disallow: /nl/modules/
Disallow: /nl/override/
Disallow: /nl/pdf/
Disallow: /nl/src/
Disallow: /nl/tools/
Disallow: /nl/translations/
Disallow: /nl/upload/
Disallow: /nl/var/
Disallow: /nl/vendor/
Disallow: /nl/webservice/
# Files
Disallow: /*fr/adresse
Disallow: /*fr/adresses
Disallow: /*fr/authentification
Disallow: /*fr/panier
Disallow: /*fr/bons-de-reduction
Disallow: /*fr/suivi-commande-invite
Disallow: /*fr/historique-des-commandes
Disallow: /*fr/identite
Disallow: /*fr/mon-compte
Disallow: /*fr/commande
Disallow: /*fr/confirmation-commande
Disallow: /*fr/details-de-la-commande
Disallow: /*fr/avoirs
Disallow: /*fr/mot-de-passe-oublie
Disallow: /*fr/recherche
Disallow: /*en/address
Disallow: /*en/addresses
Disallow: /*en/authentification
Disallow: /*en/cart
Disallow: /*en/bons-de-reduction
Disallow: /*en/guest-tracking
Disallow: /*en/historique-des-commandes
Disallow: /*en/identity
Disallow: /*en/my-account
Disallow: /*en/order
Disallow: /*en/order-confirmation
Disallow: /*en/details-de-la-commande
Disallow: /*en/credit-slip
Disallow: /*en/mot-de-passe-oublie
Disallow: /*en/search
Disallow: /*de/adresse
Disallow: /*de/adressen
Disallow: /*de/authentification
Disallow: /*de/warenkorb
Disallow: /*de/bons-de-reduction
Disallow: /*de/auftragsverfolgung-gast
Disallow: /*de/historique-des-commandes
Disallow: /*de/profil
Disallow: /*de/mein-Konto
Disallow: /*de/Bestellung
Disallow: /*de/bestellbestaetigung
Disallow: /*de/details-de-la-commande
Disallow: /*de/bestellschein
Disallow: /*de/mot-de-passe-oublie
Disallow: /*de/suche
Disallow: /*nl/adres
Disallow: /*nl/adressen
Disallow: /*nl/authentification
Disallow: /*nl/winkelmandje
Disallow: /*nl/bons-de-reduction
Disallow: /*nl/bestelling-volgen-als-gast
Disallow: /*nl/historique-des-commandes
Disallow: /*nl/identiteit
Disallow: /*nl/mijn-account
Disallow: /*nl/bestelling
Disallow: /*nl/order-bevestiging
Disallow: /*nl/details-de-la-commande
Disallow: /*nl/bestel-bon
Disallow: /*nl/mot-de-passe-oublie
Disallow: /*nl/zoeken

# ═══════════════════════════════════════════════════════════════
# AJOUTS MANUELS — robots IA & scrapers (hors génération PrestaShop)
# ═══════════════════════════════════════════════════════════════
#
# ⚠ ATTENTION PRESTASHOP : le bouton « Générer le fichier robots.txt »
# (Back Office → Trafic & SEO) RÉÉCRIT ce fichier et EFFACERA ce bloc.
# Ne pas régénérer depuis le BO, ou réappliquer ces règles ensuite
# (ou servir robots.txt directement via nginx).
#
# NOTE TECHNIQUE : un robot n'obéit QU'AU groupe le plus spécifique qui le
# concerne et IGNORE entièrement le groupe « User-agent: * ». Les robots de
# recherche IA que l'on AUTORISE ne sont donc volontairement PAS listés :
# ils héritent ainsi des règles « * » ci-dessus (pages publiques autorisées,
# panier / compte / recherche / répertoires techniques bloqués).
# Leur créer un groupe « Allow: / » les ferait échapper à ces protections.
#
# Autorisés via « * » (NE PAS leur créer de groupe dédié) :
#   OpenAI     : OAI-SearchBot, ChatGPT-User
#   Anthropic  : Claude-User, Claude-SearchBot
#   Perplexity : PerplexityBot, Perplexity-User
#   Assistants : Amazonbot, YouBot         (choix à confirmer)
#   Moteurs    : Googlebot, Bingbot, Applebot, DuckDuckBot
#   Social     : facebookexternalhit, meta-externalads, Twitterbot, WhatsApp

# ─── IA d'entraînement — bloquée ───
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
User-agent: anthropic-ai
Disallow: /

# Google : entraînement Gemini (n'affecte PAS le référencement via Googlebot)
User-agent: Google-Extended
Disallow: /

# Apple : entraînement Apple Intelligence (n'affecte PAS Applebot / Siri)
User-agent: Applebot-Extended
Disallow: /

# Meta : entraînement (facebookexternalhit reste autorisé via « * »)
User-agent: meta-externalagent
Disallow: /

# ByteDance : souvent non conforme, à bloquer aussi côté serveur
User-agent: Bytespider
Disallow: /

# Common Crawl (corpus largement réutilisé pour l'entraînement)
User-agent: CCBot
Disallow: /

# Autres robots d'entraînement / collecte de jeux de données
User-agent: cohere-ai
User-agent: Diffbot
User-agent: Omgilibot
User-agent: ImagesiftBot
Disallow: /

# ─── SEO commerciaux — bloqués ───
User-agent: AhrefsBot
User-agent: SemrushBot
User-agent: DotBot
User-agent: MJ12bot
User-agent: Barkrowler
User-agent: DataForSeoBot
User-agent: serpstatbot
User-agent: AwarioBot
User-agent: LinkupBot
Disallow: /

# ─── Moteurs non utiles pour Lapin — bloqués ───
User-agent: Baiduspider
User-agent: Baiduspider-image
User-agent: Sogou
User-agent: PetalBot
User-agent: YandexBot
Disallow: /

# Sitemap
Sitemap: https://librairie.lapin.org/1_index_sitemap.xml