WordPress : Optimisez la configuration de votre fichier Robots.txt !

Publié le 11 avril 2014 - Mise à jour le 26 juillet 2023

Par Andréa Bensaïd

Fondateur d'Eskimoz. J'accompagne les entreprises de toutes tailles dans leur stratégie d'acquisition digitale.

header_wordpress

Vous aussi vous êtes convaincu que WordPress est aujourd’hui le meilleur CMS pour optimiser votre référencement naturel. On est d’accord! Et nous ne sommes pas les seuls. En effet, le géant Google semble apprécier fortement cette technologie dans la mesure où vous l’avez bien configuré – bien sûr.

WORDPRESS - OPTIMISEZ LA CONFIGURATION DE VOTRE FICHIER ROBOTS.TXT !

Du choix de vos modules à la configuration de votre fichier robots.txt, vous pouvez rapidement vous retrouver avec du contenu dupliqué, des pages inutiles indexées, ce qui perturbe la compréhension de votre site par les moteurs de recherche et donc pénalise votre site en terme de référencement.

Vous trouverez ci-dessous les principales règles pour optimiser parfaitement votre robots.txt, de manière à guider les moteurs de recherche. Cela permettra à votre site de présenter les bonnes pages aux internautes et d’optimiser le jus de vos pages.

Fichier robots.txt WordPress optimisé

User-agent: *
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /category/
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?
Disallow: /*.php$
Disallow: /*.js$
Disallow: /*.inc$
Disallow: /*.css$
Disallow: /*.gz$
Disallow: /*.swf$
Disallow: /*.wmv$
Disallow: /*.cgi$
Disallow: /*.xhtml$

Une fois votre robots.txt configuré, rendez-vous sur la page suivante de votre site www.site.com/robots.txt afin de vérifier la présentation du fichier.

Finies les pages /category/ qui sortent sur Google à la place de votre article, qui lui, contrairement à la page /category/, est parfaitement optimisé au niveau SEO.

Pour finir, l’utilité principale d’optimiser son fichier robots.txt sur WordPress est que vous concentrez le jus au bon endroit, au lieu de le partager sur plusieurs pages.

Pourquoi indexer 100 pages, quand seulement 10 sont utiles ?

Depuis Google mobile friendly

Suite à la mise en place du label Google mobile friendly le 21 avril 2015, il n’est plus conseillé de bloquer les fichiers JavaScript, CSS et images car cela empêche l’obtention de celui-ci.

Même si le label n’a qu’une incidence sur les recherches mobiles pour le moment, il devrait prendre de plus en plus d’ampleur dans les mois/années à venir donc pensez à soigner minutieusement la limitation des accès à vos pages !

Ces articles peuvent vous intéresser

Publié le 4 février 2026

Les meilleurs outils pour mesurer votre visibilité dans les moteurs IA

Découvrez notre classement des outils de visibilité IA pour accompagner et mesurer votre stratégie GEO

Publié le 2 février 2026

Universal Commerce Protocol (UCP) : le futur du shopping avec l'IA

L'Universal Commerce Protocol (UCP) révolutionne le e-commerce en déplaçant le lieu de décision vers des agents d'intelligence artificielle.

Publié le 30 janvier 2026

Référencement Wikipedia : comment optimiser sa visibilité sur l’encyclopédie en ligne

Vous souhaiter améliorer votre référencement sur Wikipédia ? Découvrez les bonnes pratiques à respecter et les erreurs fréquentes

Publié le 26 janvier 2026

Commerce agentique : comprendre la révolution du commerce alimenté par l’IA

Le commerce agentique s’installe progressivement dans le e-commerce. Découvrez comment les agents IA révolutionnent le commerce en ligne.

Publié le 19 janvier 2026

Publicité sur ChatGPT : Le lancement attendu d'OpenAI enfin là

La publicité arrive dans ChatGPT : apprenez à mesurer et améliorer la visibilité de votre marque dans l’IA avant tout le monde.

Publié le 15 janvier 2026

Agent IA : boostez votre stratégie digitale avec l’intelligence artificielle

Agent IA : découvrez comment l’intelligence artificielle optimise votre marketing digital et booste vos performances. Profitez des conseils d’experts.