# Robots.txt pour democratie.me
# Généré le 30/01/2025

# Autoriser tous les robots
User-agent: *
Allow: /
Disallow: /logs/
Disallow: /*.bak$
Disallow: /*.old$
Disallow: /*.tmp$
Disallow: /.htaccess
Disallow: /.htpasswd

# Délai entre les requêtes (en secondes)
Crawl-delay: 1

# Googlebot spécifique
User-agent: Googlebot
Allow: /
Crawl-delay: 0

# Bingbot spécifique
User-agent: Bingbot
Allow: /
Crawl-delay: 1

# Bloquage des mauvais bots
User-agent: AhrefsBot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: DotBot
Disallow: /

# Sitemap
Sitemap: https://democratie.me/sitemap.xml

# Indication du host préféré
Host: democratie.me