robots.txt est un fichier important qui permet aux moteurs de recherche de parcourir votre site web et de contr?ler le contenu qu'ils sont autorisés à y inclure. Pour les utilisateurs de WordPress, ce fichier peut être facilement géré à l'aide du plugin Yoast SEO. Dans cet article, nous allons présenter le r?le de robots.txt, les règles de base, et comment utiliser le plugin Yoast SEO. Yoast SEO Effectuer les réglages.
![Image [1]-Yoast SEO tutorial : comment voir et modifier le fichier Robots.txt](http://gqxi.cn/wp-content/uploads/2025/07/20250703111351532-image.png)
I. Qu'est-ce que le fichier Robots.txt ?
Robots.txt est un fichier texte situé dans le répertoire racine d'un site web qui est utilisé pour guider les robots des moteurs de recherche (tels que Googlebot(Bingbot) pour explorer ou ignorer un contenu spécifique.
Exemple :
User-agent : *
Disallow : /wp-admin/
Allow : /wp-admin/admin-ajax.phpLa signification de ce code est la suivante : interdire à tous les moteurs de recherche d'accéder au site web de la /wp-admin/ mais autoriser le crawling AJAX Interface.
Deuxièmement, pourquoi définir le fichier Robots.txt ?
Un fichier Robots.txt correctement configuré peut être utile :
- Empêcher l'inclusion de contenus inutiles ou dupliqués(par exemple, back office, pages de catégories, onglets)
- Protéger les pages sensibles de l'indexation
- Orienter les moteurs de recherche pour qu'ils concentrent leurs ressources sur les pages de grande valeur.
Par exemple.WooCommerce Les magasins bloquent souvent /cart/et/checkout/ C'est un excellent moyen d'éviter qu'un contenu de qualité médiocre ne nuise aux performances de référencement, comme les pages fonctionnelles.
Comment utiliser le plugin Yoast SEO pour afficher le fichier Robots.txt ?
Le plugin Yoast SEO pour WordPress offre une fonctionnalité intégrée d'affichage et d'édition du fichier Robots.txt sans qu'il soit nécessaire d'accéder manuellement à l'hébergement ou au FTP.
Les étapes sont les suivantes :
- Connectez-vous au backend de WordPress
- Accéder au menu :Yoast SEO → Outils
![Image [2]-Yoast SEO tutorial : comment voir et modifier le fichier Robots.txt](http://gqxi.cn/wp-content/uploads/2025/07/20250703111722470-image.png)
- Cliquez sur [éditeur de fichiers] (éditeur de fichiers)
![Image [3]-Yoast SEO tutorial : comment voir et modifier le fichier Robots.txt](http://gqxi.cn/wp-content/uploads/2025/07/20250703111736811-image.png)
- Si votre site permet l'édition, le contenu actuel du fichier Robots.txt sera affiché sur la page.
![Image [4]-Yoast SEO tutorial : comment voir et modifier le fichier Robots.txt](http://gqxi.cn/wp-content/uploads/2025/07/20250703111959654-image.png)
Si le fichier n'existe pas encore, Yoast SEO propose un bouton "Créer" qui génère automatiquement le fichier dans le répertoire racine du site web. robots.txt.
Comment modifier le fichier Robots.txt ?
Dans la page [éditeur de fichiers], vous pouvez directement modifier le contenu de Robots.txt, par exemple :
User-agent : *
Disallow : /wp-admin/
Allow : /wp-admin/admin-ajax.php
Disallow : /tag/
Disallow : /author/
Plan du site : https://yourdomain.com/sitemap_index.xmlUne fois la modification terminée, cliquez sur le bouton [Enregistrer les modifications] pour mettre à jour le fichier robots.txt.
V. Exemples courants de configuration de Robots.txt
Configuration standard (convient à la plupart des sites WordPress) :
User-agent : *
Disallow : /wp-admin/
Allow : /wp-admin/admin-ajax.php
Refus : /?s=
Refus : /tag/
Disallow : /author/
Plan du site : https://yourdomain.com/sitemap_index.xmlConfigurations améliorées en matière de protection de la vie privée :
Agent utilisateur : *
Disallow : /wp-login.php
Disallow : /wp-register.php
Refus : /checkout/
Disallow : /cart/Note : Ne pas bloquer le contenu suivant, sinon cela affectera l'effet d'affichage de la page.
Disallow : /wp-content/themes/
Disallow : /wp-content/plugins/Cela empêchera les moteurs de recherche de charger CSS/JSce qui affecte les scores d'utilisabilité mobile.
VI. vérifier que le fichier Robots.txt est en vigueur
Une fois la configuration terminée, vous pouvez y accéder via votre navigateur :
https://yourdomain.com/robots.txt
![Image [5]-Yoast SEO tutorial : comment voir et modifier le fichier Robots.txt](http://gqxi.cn/wp-content/uploads/2025/07/20250703113928701-image.png)
Veillez à ce que le contenu soit cohérent avec celui de l'éditeur Yoast. Les outils suivants sont également recommandés pour les tests :
- Google Search Console → Vérifier l'outil du site web
- Screaming Frog SEO Spider
- Outil d'audit de site Ahrefs
VII. résumé et recommandations
Le fichier Robots.txt est peut-être petit, mais il joue un r?le important dans votre stratégie de référencement. Avec le plugin Yoast SEO, il est facile de gérer ce fichier critique sans entrer dans le serveur. Il est recommandé de vérifier et de mettre à jour régulièrement le fichier Robots.txt afin de s'assurer que votre stratégie d'exploration des moteurs de recherche est en phase avec la structure de votre site web et vos objectifs marketing.
Pratique recommandée :
- Bloquer les pages de mauvaise qualité, les pages dupliquées ou les pages privées
- réservation Plan du site Adresses, indexation favorable
- éviter de bloquer le chargement des fichiers CSS/JS
Lien vers cet article :http://gqxi.cn/fr/65082L'article est protégé par le droit d'auteur et doit être reproduit avec mention.
![Emoji[chi]-Photonflux.com | Service professionnel de réparation de WordPress, dans le monde entier, réponse rapide](http://gqxi.cn/wp-content/themes/zibll/img/smilies/chi.gif)
![Emoji[xigua]-Photonflux.com | Service professionnel de réparation de WordPress, dans le monde entier, réponse rapide](http://gqxi.cn/wp-content/themes/zibll/img/smilies/xigua.gif)
[PHOTO]
簡體中文 
English 
日本語 
Fran?ais 
Espa?ol 
Pas de commentaires