# tester la syntaxe du fichier robots.txt ici https://technicalseo.com/tools/robots-txt/
# User-agent: *



# bloquer les robots

# User-agent: Googlebot
# Disallow: /


User-agent: petalbot
Disallow: /


User-agent: petal bot
Disallow: /


User-agent: DataForSeoBot
Disallow: /


User-agent: GPTBot
Disallow: /


User-agent: ChatGPT-User
Disallow: /


# User-agent: bingbot
# Disallow: /


##################################

# Allow: /CGI/redir.cgi* # d?j? d?clar? plus bas
# Allow: /CGI/redira.cgi*
Allow: /pgi/redir.php?onglet=a&ident=*

# Allow: /CGI/redird.cgi*
Allow: /pgi/redir.php?onglet=d&ident=*

# Allow: /CGI/rediri.cgi*
Allow: /pgi/redir.php?onglet=i&ident=*

# Allow: /CGI/redirb.cgi*
Allow: /pgi/redir.php?onglet=b&ident=*

Allow: /redir?*

# pdf en texte integral
Allow: /pgi/redir.php?onglet=e&ident=4B314

Allow: /pgi/redir.php?onglet=e&ident=8LE144

Allow: /pgi/redir.php?onglet=e&ident=A11082

Allow: /pgi/redir.php?onglet=e&ident=FOLKO5

# Disallow: /CGI/
# Nofollow : /CGI/

##################################

Disallow: /PDF/

##################################

##################################

Disallow: /recherche_avancee/Recherche_avancee.php?id=*
Disallow: /recherche_avancee/Resultat.php?*
Disallow: /pgi/sresrech.php*
Disallow: /pgi/fpage.php*
# Disallow: /pgi/
# Disallow: /pgi/
# Disallow: /pgi/


##################################

# Nofollow ??? directives non prises en compte peut-?tre ?
Nofollow: /RUB/outils_de_decouverte.php

##################################

Disallow: /rss/dernieres_mises_en_ligne.xml

##################################

Allow: /thematiques/fr/catalogue_general/cata_lieu_edition.php
Allow: /thematiques/fr/catalogue_general/cata_editeur.php

Disallow: /thematiques/fr/
Disallow: /typologies/fr/

# Follow: https://cnum.cnam.fr/thematiques/fr/catalogue_general/cata_auteurs.php

# Nofollow: /thematiques/fr/ 
# Nofollow: /typologies/fr/ 

##################################

# Nofollow: /recherche_avancee/Aide.php

##################################

# Nofollow: /decouverte/image_aleatoire.php 
Disallow: /decouverte/image_aleatoire.php

##################################


# Directives
# Nofollow: ???
# Disallow: