Étape 2 : Rechercher les problèmes NoIndex
L'attribut noindex est une balise META qui peut apparaître à deux endroits différents de manière à supprimer une page des résultats de recherche Google. Le premier est dans la section des métadonnées pour une page donnée. Si vous découvrez que seules certaines pages ont été supprimées de l'index, c'est ce que vous devez peut-être vérifier en premier. Plus particulièrement si vous aviez modifié ces pages juste avant la suppression. Vous trouverez la balise en tête de votre page. Cela ressemblera à quelque chose comme ça :
- <meta name=”robots” content=”noindex”/>
Si le nom est "robots" et que le contenu est "noindex", c’est comme si vous disiez aux robots de recherche de ne pas indexer la page. La prochaine fois que Google verra cette page et lira ces données, il se dira «le propriétaire du site ne veut pas que cette page soit indexée, je ferais mieux de la supprimer des résultats de recherche».
Si vous trouvez cette directive méta dans l'en-tête de la page qui n'est plus indexée, félicitations, vous avez trouvé le problème. Il vous suffit de supprimer la balise noindex. Vous pouvez, si vous le souhaitez, soumettre un ping à la page via Google Webmaster Tools, ou soumettre un nouveau plan du site qui répertorie la date de modification de cette page comme très récente. Quoi qu'il en soit, Google découvrira bientôt que la directive n'est plus en place et indexera la page avec plaisir. Idéalement, il n'y aura pas de perte de classement une fois le site restauré dans l'index. Votre statut "referencement google disparu" sera solutionné sous 14 jours maximum.
L'autre emplacement où vous pourriez trouver la directive noindex se trouve dans votre fichier robots.txt. Vous trouverez ce fichier dans votre répertoire racine. Il peut y avoir des fichiers sous-répertoire robots.txt, mais s'il y en a, vous devez les supprimer et les fusionner avec votre site principal robots.txt.
Un fichier robots.txt est un fichier texte simple qui contient des informations de base et des directives pour les robots des moteurs de recherche. Si vous voyez une ligne qui ressemble à «Disallow: /», vous interdisez aux robots des moteurs de recherche d'explorer votre site web. Le «/» est le caractère incriminé. Si vous le supprimez, tout sera restauré. Si vous changez «Disallow» en «Allow», la même chose se produit. Si vous supprimez entièrement la ligne (ou le fichier entier), tout sera autorisé.
En règle générale, cette erreur se produit lorsque vous essayez de refaire un site et que vous le testez dans un environnement en direct. Vous pouvez interdire l'indexation des fichiers au cas où quelqu'un les découvrirait, vous n'avez donc pas à vous soucier des personnes qui tentent d'utiliser votre site-test.