Nous cachons toujours nos nouveaux sites aux moteurs de recherche jusqu'à ce qu'ils soient prêts pour de vrais visiteurs. Lancer un site à moitié terminé peut être stressant lorsque vous voulez que tout soit parfait.
Contrôler la visibilité de votre site protège votre travail privé et empêche Google de classer les pages incomplètes. Cela vous donne un contrôle total sur le moment où votre site web devient public.
Nous utilisons quelques astuces simples pour garder nos propres projets à venir complètement privés. Maintenant, nous allons vous guider à travers les étapes exactes pour empêcher les moteurs de recherche d'explorer votre site web.
Pourquoi empêcher les moteurs de recherche d'explorer un site WordPress ?
Pour la plupart des sites WordPress, les moteurs de recherche sont la principale source de trafic. Vous pourriez vous demander pourquoi quelqu'un voudrait décourager les moteurs de recherche ?
Voici quelques situations où vous ne voudrez pas que les moteurs de recherche indexent votre site Web :
- Au début, vous ne savez peut-être pas comment créer un environnement de développement local ou un site de staging, et vous développez votre site web pendant qu'il est en ligne. Vous ne voudrez pas que Google indexe votre site lorsqu'il est en construction ou en mode maintenance.
- Il y a aussi beaucoup de gens qui utilisent WordPress pour créer des blogs privés. Ils ne veulent pas qu'ils soient indexés par les moteurs de recherche car ils sont privés.
- Vous pouvez utiliser WordPress pour la gestion de projet ou une intranet. Dans ces cas, vous ne voudrez pas que vos documents internes soient accessibles publiquement.
Une idée fausse courante est que si vous n'avez pas de liens pointant vers votre domaine, les moteurs de recherche ne trouveront probablement jamais votre site Web. Ce n'est pas entièrement vrai.
Par exemple, il peut y avoir des liens pointant vers votre site car le nom de domaine appartenait auparavant à quelqu'un d'autre. De plus, il existe des milliers de pages sur Internet qui listent simplement des noms de domaine. Votre site peut apparaître sur l'une d'entre elles.
Avant de plonger dans les méthodes, clarifions rapidement deux termes importants :
- Le crawl (exploration) est lorsque les robots des moteurs de recherche (comme Googlebot) visitent votre site Web pour découvrir son contenu.
- L'indexation est lorsqu'ils ajoutent ce contenu à leur base de données de recherche massive afin qu'il puisse apparaître dans les résultats de recherche.
Pensez-y comme un bibliothécaire qui lit un nouveau livre (exploration) puis l'ajoute au catalogue de la bibliothèque (indexation). Certaines des méthodes ci-dessous arrêtent complètement l'exploration, tandis que d'autres empêchent simplement l'indexation. Nous allons clarifier lesquels sont lesquels !
Cela étant dit, jetons un coup d'œil à la façon d'empêcher les moteurs de recherche d'explorer votre site Web. Nous couvrirons quatre méthodes :
- Demander aux moteurs de recherche de ne pas explorer votre site WordPress
- Méthode 2 : Demander aux moteurs de recherche de ne pas indexer des pages individuelles
- Méthode 3 : Protéger un site entier par mot de passe à l'aide de cPanel
- Méthode 4 : Protéger WordPress par mot de passe avec un plugin
- Foire aux questions (FAQ)
- Guides d'experts sur l'exploration et l'indexation par les moteurs de recherche
Méthode 1 : Demander aux moteurs de recherche de ne pas explorer votre site WordPress
C'est la méthode la plus simple, mais elle ne protège pas entièrement votre site web contre l'exploration.
WordPress dispose d'une fonctionnalité intégrée qui vous permet d'indiquer aux moteurs de recherche de ne pas indexer votre site. Il vous suffit de vous rendre dans Paramètres » Lecture et de cocher la case « Visibilité pour les moteurs de recherche ».
Lorsque cette case est cochée, WordPress ajoute cette ligne à l'en-tête de votre site web :
<meta name='robots' content='noindex,nofollow' />
Cette balise indique aux moteurs de recherche de ne pas afficher cette page dans les résultats de recherche (noindex), et leur demande également de ne pas suivre les liens sur cette page (nofollow).
WordPress modifie également le fichier robots.txt de votre site et y ajoute une règle de désindexation :
User-agent: *
Disallow: /
Les lignes du fichier robots.txt demandent aux robots d'exploration de ne pas explorer vos pages, tandis que la balise meta leur dit strictement de ne pas indexer votre site. Cependant, il y a un hic.
Comme le fichier robots.txt empêche les moteurs de recherche d'explorer votre site web, ils pourraient ne jamais voir votre balise meta noindex. Si un autre site web crée un lien vers votre domaine, Google pourrait toujours indexer votre URL (affichant souvent « Informations indisponibles pour cette page » dans les résultats de recherche).
Si vous souhaitez empêcher les moteurs de recherche d'indexer ou d'explorer votre site web, vous devrez protéger votre site WordPress par mot de passe en utilisant les méthodes 3 ou 4.
Méthode 2 : Demander aux moteurs de recherche de ne pas indexer des pages individuelles
Vous pourriez souhaiter que les moteurs de recherche explorent et indexent votre site web, mais n'incluent pas une certaine publication ou une page spécifique dans les résultats de recherche.
La façon la plus simple de le faire est d'utiliser le plugin All in One SEO (AIOSEO) . C'est le meilleur outil SEO pour WordPress et il est utilisé par plus de 3 millions d'entreprises.
Pour ce tutoriel, nous utiliserons la version gratuite d'AIOSEO car elle inclut l'outil d'analyse SEO. Il existe également une version premium d'AIOSEO qui offre plus de fonctionnalités comme les outils de sitemap, le gestionnaire de redirection, le balisage schema, l'éditeur robots.txt, et plus encore.
La première chose à faire est d'installer et d'activer le plugin AIOSEO sur votre site web. Vous pouvez apprendre comment installer et configurer le plugin en suivant notre guide étape par étape sur comment configurer All in One SEO pour WordPress.
Une fois le plugin configuré, vous pouvez l'utiliser pour demander aux moteurs de recherche de ne pas indexer certains articles et pages. Encore une fois, il appartient entièrement aux moteurs de recherche d'accepter cette demande ou de l'ignorer.
Modifiez simplement l'article ou la page que vous ne souhaitez pas voir indexer. Vous devez faire défiler vers le bas jusqu'aux paramètres AIOSEO en bas de l'éditeur WordPress, puis cliquer sur l'onglet 'Avancé'.
Par défaut, votre article utilisera les paramètres robots standard. Allons-y et changeons cela.
Pour changer cela, vous devez désactiver le bouton bascule 'Utiliser les paramètres par défaut'.
Maintenant, vous pouvez cocher la case 'Ne pas indexer'. Une fois l'article publié ou mis à jour, il sera demandé aux moteurs de recherche de ne pas l'indexer.
Pour en savoir plus, consultez notre avis détaillé sur AIOSEO.
Méthode 3 : Protéger un site entier par mot de passe à l'aide de cPanel
Si votre fournisseur d'hébergement WordPress offre un accès cPanel pour gérer votre compte d'hébergement, vous pouvez protéger l'ensemble de votre site en utilisant cPanel.
Tout ce que vous avez à faire est de vous connecter à votre tableau de bord cPanel, puis de cliquer sur l'icône 'Confidentialité du répertoire' dans la section 'Fichiers'.
Ensuite, vous devez trouver le dossier où vous avez installé WordPress. Habituellement, c'est le dossier public_html.
Astuce de pro : Si vous cliquez sur l'icône du dossier, il s'ouvrira pour que vous puissiez voir ce qu'il contient. Pour le protéger par mot de passe, vous devez simplement cliquer sur le bouton « Modifier » à côté du nom du dossier.
Après cela, cliquez simplement sur le bouton 'Modifier' à côté de ce dossier.
Note : Si vous avez plusieurs sites WordPress installés sous le répertoire public_html, vous devez alors cliquer sur le lien public_html pour parcourir ces sites, puis modifier le dossier du site web que vous souhaitez protéger par mot de passe.
Cela vous amène à un écran où vous pouvez activer la protection par mot de passe.
Cochez simplement la case qui dit « Protéger ce répertoire par mot de passe » et cliquez sur le bouton « Enregistrer ». Si vous le souhaitez, vous pouvez également personnaliser le nom du répertoire protégé.
Vous verrez un message de confirmation indiquant que les autorisations d'accès au répertoire ont été modifiées.
Ensuite, vous devez cliquer sur le bouton « Retour ».
Sur l'écran suivant, il vous sera demandé de créer un nouvel utilisateur. Allez-y et entrez un nom d'utilisateur et un mot de passe, puis confirmez votre mot de passe.
Assurez-vous de noter ces informations de connexion dans un endroit sûr, comme une application de gestion de mots de passe, car vous en aurez besoin pour consulter votre site.
Une fois que vous avez cliqué sur le bouton « Enregistrer », vous avez ajouté avec succès la protection par mot de passe à votre site WordPress.
Attention : La protection par mot de passe de votre site au niveau du serveur bloquera l tout accès à votre site web. Si vous essayez de tester des services tiers tels que des tâches cron externes ou des passerelles de paiement (comme Stripe ou PayPal), ils ne pourront pas se connecter à votre site.
Désormais, chaque fois qu'un utilisateur ou un moteur de recherche visite votre site Web, il sera invité à saisir le nom d'utilisateur et le mot de passe que vous avez créés précédemment pour afficher le site.
Méthode 4 : Protéger WordPress par mot de passe avec un plugin
Si vous utilisez une solution d'hébergement WordPress géré, vous n'aurez peut-être pas accès à cPanel. Dans ce cas, vous pouvez utiliser un plugin WordPress pour protéger votre site par mot de passe.
Voici les deux solutions les plus populaires :
- SeedProd est le plugin n°1 pour les modes "coming soon" et maintenance pour WordPress, utilisé sur plus de 2 millions de sites web. C'est la solution parfaite pour les sites en construction car vous pouvez afficher une belle page de destination personnalisée aux visiteurs humains tout en cachant complètement votre site inachevé et votre code aux moteurs de recherche. Nous avons un guide pratique étape par étape pour SeedProd.
- Password Protected est un moyen très simple de protéger votre site WordPress par mot de passe avec un seul mot de passe (aucune création d'utilisateur nécessaire). Consultez notre guide étape par étape sur comment protéger un site WordPress par mot de passe.
Foire aux questions (FAQ)
Voici les réponses à certaines des questions les plus fréquentes que nous recevons concernant l'arrêt de l'exploration des sites WordPress par les moteurs de recherche.
1. Quelle est la différence entre bloquer l'exploration et bloquer l'indexation ?
Bloquer l'exploration (en utilisant robots.txt) revient à placer un panneau « Accès interdit ». Cela demande aux robots des moteurs de recherche de ne pas consulter le contenu de votre site. Bloquer l'indexation (en utilisant une balise noindex) indique aux moteurs de recherche de ne pas lister votre site dans leurs résultats de recherche, même s'ils l'ont exploré.
2. L'option intégrée à WordPress « Décourager les moteurs de recherche » est-elle suffisante pour masquer mon site ?
Pour un développement temporaire, c'est souvent suffisant. Cependant, cette méthode n'est qu'une requête, et certains moteurs de recherche pourraient ne pas en tenir compte. Pour une confidentialité complète ou pour protéger des informations sensibles, la protection par mot de passe est la seule méthode garantie.
3. La protection par mot de passe de mon site nuira-t-elle à mon SEO lorsque je serai prêt à lancer ?
Non, cela ne nuira pas à votre SEO. Lorsque votre site est protégé par mot de passe, les moteurs de recherche ne peuvent pas y accéder, il n'a donc aucun classement SEO (positif ou négatif). Une fois que vous aurez supprimé la protection par mot de passe et autorisé l'indexation, les moteurs de recherche commenceront à l'explorer et à le classer normalement.
4. Comment puis-je vérifier si Google a déjà indexé mon site ?
La méthode la plus simple est d'effectuer une recherche de site sur Google. Allez sur google.com et tapez site:votredomaine.com dans la barre de recherche. Si des résultats apparaissent, votre site a été indexé.
Pour une approche plus technique et précise, vous pouvez utiliser la Google Search Console gratuite. Vous pouvez coller n'importe quelle URL de votre site web dans leur outil d'inspection d'URL pour voir son statut d'indexation exact et savoir si Googlebot l'a correctement explorée.
5. Comment désactiver le SEO dans WordPress ?
Il n'y a pas de bouton unique pour désactiver le SEO, mais vous pouvez effectivement le désactiver en empêchant les moteurs de recherche d'indexer votre site.
Vous pouvez utiliser le paramètre intégré de WordPress dans Paramètres » Lecture, ou pour une solution plus complète, utiliser un plugin comme SeedProd pour mettre votre site en mode maintenance.
Si vous utilisez un plugin SEO comme All in One SEO, vous pouvez également l'utiliser pour définir globalement vos pages sur « noindex ».
6. Comment cacher mon site WordPress des moteurs de recherche pendant les tests ?
La manière la plus sûre de cacher un site de test ou de staging aux moteurs de recherche est d'utiliser la protection par mot de passe. Vous pouvez le faire en configurant un mot de passe de répertoire dans votre panneau de contrôle d'hébergement web (comme cPanel) ou en utilisant un plugin WordPress comme SeedProd pour mettre votre site en mode maintenance. Comme les robots des moteurs de recherche ne peuvent pas entrer de mots de passe, ils sont complètement bloqués pour explorer ou indexer votre contenu de test.
Guides d'experts sur l'exploration et l'indexation par les moteurs de recherche
Nous espérons que cet article vous a aidé à empêcher les moteurs de recherche d'explorer ou d'indexer votre site WordPress. Vous pourriez vouloir consulter d'autres guides liés à l'exploration et à l'indexation par les moteurs de recherche :
- Comment masquer une page WordPress de Google
- Comment faire apparaître mon site WordPress sur Google ? (Guide pour débutants)
- Pourquoi mon site WordPress a-t-il été désindexé de Google ?
- Comment demander à Google de recrawler les URL de votre site WordPress
- Comment optimiser votre fichier Robots.txt WordPress pour le SEO
- Le problème du budget d'exploration SEO de WordPress et comment le résoudre
Si vous avez aimé cet article, abonnez-vous à notre Chaîne YouTube pour des tutoriels vidéo WordPress. Vous pouvez également nous trouver sur Twitter et Facebook.
Oyatogun Oluwaseun Samuel
Wow ! Merci wpBeginner, je n'avais jamais pensé à activer la protection par mot de passe sur le dossier public_html. Merci de fournir cette perspective. Merci beaucoup !
Jiří Vaněk
J'ai lu que souvent ces procédures, ainsi que robots.txt, ne sont que des comportements recommandés pour un robot. Comment éviter d'être recherché réellement. Est-il possible, par exemple, de bloquer les plages de Google et Bing, par exemple, à l'aide d'un fichier .htaccess ?
Support WPBeginner
Vous utiliseriez la méthode 3 ou 4 pour bloquer complètement l'accès à votre site.
Admin
Jiří Vaněk
Je comprends, mais je suppose que le site web ne sera alors pas public et que seules les personnes connaissant le nom d'utilisateur et le mot de passe pourront y accéder ? Mon idée était juste d'essayer de trouver les plages d'adresses IP des bots et de les bloquer au niveau du fichier htacess, par exemple. Est-ce que cela a du sens ou est-ce absurde ?
Support WPBeginner
Il n'y a aucune garantie que les bots ne trouveraient pas le site plus tard avec une adresse IP différente. Si vous voulez être sûr que votre site ne soit pas exploré, vous voudrez qu'il s'agisse d'un site privé, sinon la meilleure option est d'utiliser robots.txt pour demander que le site ne soit pas exploré.
Jiří Vaněk
Je comprends, et merci pour votre réponse. Je pensais pouvoir résoudre le problème en bloquant la plage, mais vous avez raison, le bot pourrait provenir d'une autre IP ou d'une nouvelle plage. J'essaierai de me fier au fichier robots.txt et j'espère que tout ira bien.
mohadese esmaeeli
La croyance répandue selon laquelle un grand nombre de pages indexées sur un site n'a aucun effet sur l'indexation des autres pages est-elle correcte ?
Support WPBeginner
Ce n'est pas parce que vous avez des pages indexées sur votre site que vous ne pouvez pas avoir d'autres pages cachées aux robots d'exploration pour empêcher leur indexation.
Admin
Moinuddin Waheed
Je suis plusieurs fois resté pensif dans l'onglet des réglages du tableau de bord WordPress en me demandant pourquoi quelqu'un voudrait décourager Google d'afficher la page ou l'article. Aujourd'hui, en fait, après avoir lu cet article, j'ai compris les raisons pour lesquelles quelqu'un découragerait l'indexation par les moteurs de recherche.
C'est très simple à faire en fait. nous devons cocher la case dans la section des réglages, section lecture, où il est demandé de décourager les moteurs de recherche pour la visibilité.
Merci d'avoir dissipé mon doute de longue date.
Support WPBeginner
Glad we should share why someone would use the checkbox
Admin
Charlotte
C'était exactement ce que je cherchais. Après avoir déplacé mon site de développement vers le site en direct du client, je ne voulais plus qu'aucun trafic ne revienne sur l'ancien. Merci !
Support WPBeginner
Glad our guide was helpful
Admin
Ryan
J'ai supprimé définitivement mon site de WordPress et lorsque je tape mon nom sur Google, l'ancien site WordPress apparaît toujours, bien qu'il ait disparu. Quelqu'un de l'équipe de support peut-il m'aider à le supprimer ? Je ne veux pas que mes clients soient confus avec mon site réel et actif.
Support WPBeginner
Pour votre ancien site dans les résultats sur Google, si vous explorez le site comme Google, cela peut aider à mettre à jour le cache de Google. Pour plus de moyens de supprimer complètement le site, vous voudrez consulter notre article ici : https://www.wpbeginner.com/wp-tutorials/how-to-permanently-delete-a-wordpress-site-from-internet/
Admin
Divyanshu
si nous désactivons l'indexation du site WordPress pour le protéger des pirates, cela affectera-t-il l'indexation de Google ou non, et si oui, comment autoriser Google à indexer mes pages
Andy
Ne semble pas fonctionner. J'ai suivi les instructions avec confiance. Mon sous-domaine est toujours visible publiquement.
Support WPBeginner
Salut Andy,
Si vous avez protégé par mot de passe votre répertoire de sous-domaine, veuillez vérifier à nouveau ses paramètres dans cPanel. Si tout semble correct, vous voudrez peut-être contacter votre fournisseur d'hébergement WordPress.
Admin
Jay
Oui, ce qui est écrit sous « Décourager les moteurs de recherche d'indexer le site » est très vrai. Google ne semble pas en tenir compte
chinju
Bonjour, j'ai un doute : si un site web a 1 million de sous-pages, le moteur de recherche bloquera-t-il toutes les sous-pages lorsque nous ajouterons
User-agent: *
Disallow: /
dans le fichier robots ?
Shekhar Sardar
Oui. L'ajout de Disallow:/ dans robot.txt indiquera à tous les robots des moteurs de recherche de ne pas explorer ce site ou cette page Web.
anand
je veux que les pages de membres et la page de profil des membres ne soient pas indexées par les moteurs de recherche, comment faire ????
Kenneth
J'ai essayé cela mais cela a perturbé mon .htccess pour mon installation Wordpress.
Procédez donc avec prudence.
Joojo
Bonjour,
J'ai actuellement un blog Wordpress.com (plan gratuit) et je souhaite vendre mes articles numériques en ligne sans créer de site Web et en m'appuyant entièrement sur le blog, au début (j'ai manqué de fonds). Ainsi, en poursuivant cette idée, j'ai apporté des modifications à mon blog, sous cela, après avoir effectué le paiement, le client est redirigé vers ma page de blog avec un lien pour télécharger le contenu numérique. Donc, je veux juste que la passerelle de paiement puisse rediriger le trafic vers la page de téléchargement sur mon blog et ne pas qu'elle soit consultable par les moteurs de recherche, etc. et qu'elle ne soit pas non plus répertoriée dans la liste des articles/pages de Wordpress.com, etc. car si la page de téléchargement est consultable par les moteurs de recherche et répertoriée dans les articles de mon blog, je ne gagnerais rien car le client téléchargerait directement le contenu sans effectuer le paiement.
Cordialement,
Joojo.
Jennifer
J'apprends WP maintenant et je conçois mon site. Pour l'instant, je ne veux pas que le site soit exploré, j'ai donc coché la case Visibilité des moteurs de recherche et j'ai ajouté la protection par mot de passe. Cependant, dans quelques mois, je voudrai que le site soit mis en ligne et j'aurai des visiteurs sur mon site. Si je décoche la case Visibilité des moteurs de recherche et retire la protection par mot de passe, l'en-tête robots nofollow sera-t-il automatiquement mis à jour ? Ou devrai-je le mettre à jour manuellement dans la section en-tête ?
Support WPBeginner
Oui, ce sera le cas. Cependant, pour être plus sûr, vous devez soumettre le sitemap xml de votre site à l'aide des outils pour webmasters de Google. Cela vous permettra de voir si des erreurs d'exploration sont trouvées sur votre site.
Admin
Ryan
Est-il possible de bloquer uniquement des pages spécifiques de votre site, plutôt que de bloquer le site entier ?
Chad
Wordpress offre une option de protection par mot de passe sur toutes vos pages et publications. Changez simplement la « visibilité » dans l'édition de votre page ou publication en « protégé par mot de passe ».
L'équipe de WPBeginner
Veuillez consulter ce fil de discussion.
Patrick
Comment puis-je faire en sorte que Google et Bing explorent mon site tout en empêchant SeMalt de le faire. SeMalt envoie du trafic sur mon site, donnant l'impression que j'ai plus de visites, cependant ces clics quittent mon site immédiatement et augmentent ainsi le taux de rebond de mon site WordPress.
Toute aide à ce sujet serait appréciée.
Patrick
Pawan Reddy
Merci pour cette astuce. Je ne savais pas que c'était possible