Il n’y a grand chose à mettre dans le fichier robots.txt de mon blog mais il y a au moins l’entrée Sitemap que je préfères générer dynamiquement pour que le template du site soit réutilisable.

Commencez par créer le template robots.txt.j2 dans le thème ou dans un répertoire configuré par EXTRA_TEMPLATES_PATHS:

User-agent: *
Sitemap: {{SITEURL}}/sitemap.xml

Modifiez la configuration de Pelican dans pelicanconf.py:

TEMPLATE_PAGES = {
        'robots.txt.j2': 'robots.txt'
}

Voilà, c’est terminé, lancez le build et votre robots.txt se trouvera à la racine de votre site.

Stéphane RAULT


Commentaires

comments powered by Disqus