Comment dissuader les moteurs de recherche d'indexer votre site WordPress

Pourquoi voudriez-vous désactiver la visibilité de votre site WordPress sur les moteurs de recherche ?

La plupart des propriétaires de sites web feraient tout ce qu'il faut pour les indexer.

Toutefois, si vous êtes encore en train de construire votre site Web, vous ne souhaitez peut-être pas que les moteurs de recherche l'explorent. Dans une telle situation, vous devez décourager les moteurs de recherche d'indexer votre site. 

Dans cet article, nous allons vous montrer comment empêcher les moteurs de recherche de parcourir votre site WordPress.

Pourquoi désactiver la visibilité des moteurs de recherche pour votre site WordPress ?

La plupart des propriétaires de sites web considèrent les moteurs de recherche tels que Google ou bing comme leur meilleur ami. Après tout, les moteurs de recherche sont souvent la source de trafic la plus importante.

Alors, pourquoi vouloir désactiver l'indexation des moteurs de recherche pour un site WordPress ?

Il y a en fait quelques bonnes raisons de le faire. Par exemple, cela peut être le cas si vous construisez encore votre site web sur un domaine accessible au public. Dans ce cas, vous ne voudrez peut-être pas que Google ou un autre moteur de recherche indexe vos pages "En construction" ou "Prochainement". D'autres raisons peuvent être invoquées :

1. Création d'un site web sur invitation seulement ou d'un site web de test.
2. Transférer un domaine vers lequel pointent encore des liens obsolètes.
3. Gérer un blog ou un portfolio privé que vous ne souhaitez pas voir apparaître dans les résultats des moteurs de recherche.

N'oubliez pas que, même si vous pensez que personne ne connaît encore votre site, il existe plusieurs façons de le faire apparaître accidentellement dans les résultats des moteurs de recherche. De vieux liens provenant d'un ancien propriétaire de domaine, des annuaires de domaines aléatoires ou même des recherches automatisées peuvent rendre votre site plus public que vous ne le souhaiteriez.

Comment les moteurs de recherche indexent-ils les sites web ?

Avant d'aborder la manière de décourager les moteurs de recherche, examinons brièvement leur fonctionnement. Les moteurs de recherche utilisent des bots ou des spiders pour parcourir les sites web et indexer leur contenu.

Une fois indexé, votre site commence à apparaître dans les pages de résultats des moteurs de recherche (SERP).

C'est généralement ce que vous souhaitez, mais pas toujours.

Décourager les moteurs de recherche d'indexer votre site WordPress

Il existe deux façons de décourager les moteurs de recherche d'indexer votre site WordPress. Examinons-les en détail.

Méthode 1 : Paramètres de visibilité des moteurs de recherche de WordPress

Cette méthode permet aux propriétaires de sites d'empêcher les moteurs de recherche d'explorer ou d'indexer leurs sites Web en utilisant une fonction intégrée de WordPress.

1. Cliquez sur "Paramètres" dans la zone d'administration de WordPress. 
2. Sélectionnez "Lecture" dans le menu déroulant situé sous "Paramètres".
3. Pour confirmer vos modifications, cliquez sur le bouton "Enregistrer".

Et le tour est joué ! Cependant, gardez à l'esprit qu'il appartient aux moteurs de recherche d'honorer cette demande.

Méthode 2 : Modifier manuellement le fichier Robots.txt

Pour ceux qui préfèrent prendre les choses en main, vous pouvez modifier manuellement le fichier robots.txt afin d'empêcher les moteurs de recherche d'explorer votre site.

Connectez-vous à votre site web en utilisant votre client FTP et allez dans le dossier du répertoire racine de WordPress et trouvez le fichier Robots.txt. Créez un nouveau fichier vierge si vous ne le trouvez pas.

Ajoutez ce code en haut du fichier :

User-agent:*
Disallow: /

De cette façon, les robots des moteurs de recherche ne devraient pas indexer votre site Web.

En utilisant le code ci-dessus, les moteurs de recherche n'indexeront pas l'ensemble de votre site. Afin d'interdire une page spécifique, vous devez fournir le sous-répertoire et le slug.

Disallow: /private/my-article

Méthode 3 : Protection au niveau du serveur (l'option nucléaire)

Vous pouvez demander aux moteurs de recherche de ne pas indexer votre site Web en utilisant les paramètres de visibilité par défaut de WordPress ou le fichier robots.txt.

Malgré cela, les moteurs de recherche peuvent toujours explorer et indexer les pages, les fichiers ou les images de votre site web.

La seule façon de s'assurer que les moteurs de recherche n'indexeront pas ou n'exploreront pas du tout votre site web est de le protéger par un mot de passe au niveau du serveur.

Si vous voulez être absolument sûr que votre site reste privé, vous pouvez protéger votre site WordPress par un mot de passe au niveau du serveur. Des plugins comme Password Protected peuvent facilement le faire pour vous.

Installez et activez le plugin, puis accédez à Paramètres -> Mot de passe protégé et personnalisez les paramètres en fonction de vos besoins.

Et si je change d'avis ? Comment indexer un site WordPress dans Google

Si vous décidez par la suite d'indexer votre site WordPress dans Google, il vous suffit d'inverser les étapes décrites ci-dessus. Google et les autres moteurs de recherche devraient naturellement commencer à explorer et à indexer votre site au fil du temps.