Une autre chose que vous devez faire pour que votre site Web soit mieux classé dans les moteurs de recherche est de montrer la voie aux robots. Les robots jouent un rôle important dans la découverte de pages. Pour cela, vous devez créer le fichier robots.txt et le configurer correctement. Vous pouvez continuer à lire cet article pour savoir comment procéder.

Qu'est-ce que Robots.txt ?

Les moteurs de recherche explorent les sites Web via des robots. Fichier robots.txt WordPress Il indique aux moteurs de recherche comment se comporter lors de l'exploration. Fichier Robots.txt Même si vous n'en créez pas, votre site sera exploré par les moteurs de recherche. N'oubliez pas ça.

Comment créer des robots.txt

Vous pouvez créer un fichier robots.txt dans WordPress manuellement ou via un plugin.

Création de Robots.txt WordPress

Création de Robots.txt avec Rank Math SEO

Le plugin Rank Math SEO vous aide à réaliser une optimisation du référencement interne dans vos publications et pages. De cette façon, vous pouvez effectuer un travail de référencement plus réussi. Il en va de même pour la création d'un fichier robots.txt. Après avoir installé et activé le plugin, cliquez sur Paramètres généraux dans le menu Rank Math SEO du panneau d'administration. Cliquez sur le bouton Modifier Robots.txt pour accéder à l'écran d'édition Robots.txt. Si vos autorisations d'écriture/lecture sont correctes, vous pouvez modifier votre fichier robots.txt virtuel ici. Si vous disposez déjà d'un fichier robots.txt, cette section ne s'appliquera pas.

Création de Robots.txt via FTP

Ouvrez le Bloc-notes et écrivez vos règles robots.txt dans son contenu. Si vous ne savez pas quoi écrire, vous pouvez utiliser les règles robots.txt recommandées que nous avons mentionnées dans la section suivante de notre article. Enregistrez le fichier dans l'extension .txt et connectez-vous au répertoire racine de votre site (généralement public_html) via une connexion FTP et téléchargez le fichier.

Création de Robots.txt avec le gestionnaire de fichiers

Après vous être connecté au panneau de contrôle d'hébergement que vous utilisez (cpanel, plesk, directadmin, cwp, etc.), ouvrez le gestionnaire de fichiers. Accédez au répertoire racine de votre site (généralement public_html) depuis le gestionnaire de fichiers. Dans le menu de création d'un nouveau fichier, cliquez sur Créer un nouveau fichier et définissez l'extension du fichier sur .txt. Écrivez les règles robots.txt et enregistrez le fichier.

Création de Robots.txt avec le plugin Robots.txt Editor

Plugin de l'éditeur Robots.txt Il vous permet de créer et de modifier facilement des fichiers robots.txt sans gestionnaire de fichiers ni accès FTP.

Page des plugins -> https://wordpress.org/plugins/robots-txt-editor/

Après avoir téléchargé le plugin, activez-le. Accédez ensuite à la page Lecture sous Paramètres à l’aide de la barre latérale gauche de WordPress. Écrivez vos règles robots.txt dans la case intitulée robots.txt en bas de la page et enregistrez-les.

Règles WordPress Robots.txt

Les règles robots.txt recommandées pour WordPress sont les suivantes. Vous devez écrire votre propre adresse de site au lieu de domain.com et l'URL sitemap.xml que vous utilisez au lieu de sitemap.xml. Nous aimerions vous donner un conseil important : si vous utilisez le plugin Rank Math SEO ou Yoast SEO, votre plan de site sera créé sous le nom sitemap_index.xml, et non sitemap.xml. N'oubliez pas de vérifier l'URL que vous avez écrite en la saisissant dans le navigateur.

https://www.domain.com/sitemap.xml" style="color:#272822;display:none;background-color:#F8F8F2" aria-label="Copier" data-copied-text="Copié !" data-has-text-button="textSimple" data-inside-header-type="phares" aria-live="polite" class="code-block-pro-copy-button">Copier
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.domain.com/sitemap.xml

Obtenez une assistance gratuite pour la création de Robots.txt

Si vous ne parvenez pas à créer le fichier robots.txt ou si vous souhaitez obtenir une assistance gratuite concernant le fichier robots.txt, veuillez indiquer votre problème avec une explication détaillée dans la section commentaires. Nous répondrons à votre commentaire dans les 24 heures et vous offrirons une assistance gratuite.

Obtenez une assistance professionnelle pour créer un fichier Robots.txt

Si vous ne parvenez pas à créer le fichier robots.txt ou si vous souhaitez obtenir une assistance professionnelle concernant le fichier robots.txt, entrez votre nom et votre numéro de téléphone dans le formulaire ci-dessous. Laissez-nous vous joindre dans les plus brefs délais.