|
|
|
Tutoriel : configurer le fichier robots.txt et le sitemap XML pour booster ton SEO

Tutoriel : configurer le fichier robots.txt et le sitemap XML pour booster ton SEO

Ce que Google voit… ou pas

Ton site peut être magnifique, rapide, ultra-fonctionnel…

Dans ce guide, je te montre comment configurer proprement ces deux fichiers dans WordPress, avec SEOPress (mon chouchou des plugins SEO 🇫🇷), sans tomber dans le jargon de développeur.

Mais si Google ne sait pas quoi indexer, quoi éviter, et où chercher, tu risques de passer inaperçu.

C’est là que deux fichiers techniques entrent en scène, souvent ignorés, mais essentiels pour ton SEO :

  • Le fichier robots.txt, qui joue le rôle de videur de ton site (« Toi tu rentres, toi non. »)
  • Le sitemap.xml, qui sert de plan VIP pour montrer à Google tes pages les plus sexy.

Entrons tout de suite dans le vif du sujet dans ce nouvel article !

Table des matières
configurer robots sitemap seopress

Étape 1 – robots.txt : la barrière intelligente

Qu’est-ce que c’est ?

Un petit fichier texte qui donne des instructions claires aux robots des moteurs de recherche : où ils peuvent aller, et surtout… où ils doivent rester dehors.

Il est situé ici : https://tonsite.fr/robots.txt

Comment le créer ou le modifier ?

Tu peux :

  • Passer par le FTP (méthode old school)
  • Ou beaucoup mieux : utiliser SEOPress, qui te permet de l’éditer directement dans l’admin WordPress.

🔗 SEOPress Pro (lien affilié)

Exemple de robots.txt bien réglé :

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /?s=
Disallow: /cgi-bin/
Allow: /wp-admin/admin-ajax.php
 
Sitemap: https://tonsite.fr/sitemaps.xml

À tester ici :

👉 https://www.google.com/webmasters/tools/robots-testing-tool

Étape 2 – sitemap.xml : le plan de route de Google

Pourquoi c’est important ?

Le sitemap liste toutes tes pages que tu veux indexer. Il aide les robots à :

  • Explorer ton site plus vite.
  • Découvrir ton nouveau contenu dès sa publication.
  • Ignorer les pages techniques ou inutiles.

Génération avec SEOPress

  1. Installe le plugin : SEOPress 
  2. Active les sitemaps XML dans le menu SEO > Sitemaps
  3. Configure ce que tu veux y faire figurer : pages, articles, CPT…

Ton sitemap sera disponible ici :

https://tonsite.fr/sitemaps.xml

Astuce :

N’ajoute pas tout et n’importe quoi :

  • Pas de panier
  • Pas de compte client
  • Pas d’archives inutiles

Étape 3 – Soumettre le sitemap aux moteurs

Google Search Console : Ajoute sitemaps.xml dans l’onglet « Sitemaps » de ton domaine.

Bing Webmaster Tools : Même chose : tu déposes ton plan, et Bing se débrouille pour le lire.

Cas concrets à intégrer dans ton fichier robots.txt

Site avec espace membre :

Disallow: /mon-compte/
Disallow: /connexion/

WooCommerce :

Disallow: /cart/
Disallow: /checkout/

Site en construction :

Disallow: /test/
Disallow: /staging/

Outils utiles à garder sous le coude

Nom de l’outilLien
Test robots.txt Googlehttps://www.google.com/webmasters/tools/robots-testing-tool
Validateur de sitemap XMLhttps://www.xml-sitemaps.com/validate-xml-sitemap.html
SEOPress (plugin SEO complet 🇫🇷)https://www.seopress.org/

Récap’ des bonnes pratiques

  • robots.txt → bloquer les dossiers techniques, autoriser AJAX
  • sitemap.xml → lister uniquement les contenus utiles (pas les pages système)
  • Soumettre ces fichiers à Google et Bing
  • Vérifier régulièrement que tout fonctionne dans la Search Console
  • Ne jamais bloquer une URL dans robots.txt si tu veux la désindexer → utilise plutôt la balise noindex

C’est aussi un point critique lors d’une refonte WordPress : un noindex oublié lors du passage en production peut rendre ton site invisible à Google en quelques heures.

En conclusion

Deux fichiers, un max de résultats !

Le référencement, ce n’est pas juste publier un article et espérer le top 3 dans Google.
C’est aussi faciliter la vie des robots : les guider, leur dire quoi indexer et quoi ignorer.
Et pour ça, robots.txt et sitemap.xml sont les deux meilleurs copilotes.

Grâce à SEOPress, tu peux tout gérer sans coder une ligne, directement dans ton WordPress.

Tu veux aller plus loin ?

Je peux :

  • ·   Vérifier ton fichier robots.txt
  • ·   Nettoyer ton sitemap.xml
  • ·   T’indiquer ce qui bloque ton SEO dans Google

📩 Contacte-moi pour un audit express et efficace. 

À propos de l'auteur
Image de Xavier Taillebois
Xavier Taillebois

Je suis Xavier, fondateur de XT DESIGN WEB. Mon truc : transformer des offres parfois floues en solution WordPress claires, rapides et bien référencées. Mon parcours atypique (École Boulle → 21 ans chef de projet & architecte de solutions → 7+ ans webdesigner/webmaster) m’aide à marier esthétique et rigueur technique pour livrer des sites beaux, stables et faciles à gérer. J’accompagne les TPE/PME, indépendants et startups sur la création, le SEO et la maintenance, avec pédagogie, transparence et zéro jargon. J'accompagne les TPE/PME, entrepreneurs et artisans sur la création de site WordPress, le SEO et la maintenance, avec pédagogie, transparence et zéro jargon.

À propos de l'auteur
Image de Xavier Taillebois
Xavier Taillebois

Je suis Xavier, fondateur de XT DESIGN WEB. Mon truc : transformer des offres parfois floues en solution WordPress claires, rapides et bien référencées. Mon parcours atypique (École Boulle → 21 ans chef de projet & architecte de solutions → 7+ ans webdesigner/webmaster) m’aide à marier esthétique et rigueur technique pour livrer des sites beaux, stables et faciles à gérer. J’accompagne les TPE/PME, indépendants et startups sur la création, le SEO et la maintenance, avec pédagogie, transparence et zéro jargon. J'accompagne les TPE/PME, entrepreneurs et artisans sur la création de site WordPress, le SEO et la maintenance, avec pédagogie, transparence et zéro jargon.

Développement de site WordPress sur-mesure, réalisés pour vous.

Besoin d’un site web performant ou d’une refonte optimisée ? 🚀 Discutons ensemble de votre projet pour créer un site sur-mesure, alliant design, référencement et sécurité. Profitez de l’expertise d’un spécialiste pour booster votre présence en ligne et atteindre vos objectifs. Contactez-moi dès maintenant !

Poursuivre votre lecture avec un autre article