Avez-vous du mal à trouver votre page Web grâce à des recherches en ligne? Dans cet article, vous apprendrez à vérifier si votre page est indexée.
Si vous ne vous classez pas pour tout ce que vous essayez, aussi spécifique soit—il, cela n’a peut-être rien à voir avec la qualité de votre contenu – il peut s’agir d’un problème d’indexation.
Chaque moteur de recherche tire ses résultats d’un index, et si une page Web est manquante dans cet index, elle ne peut évidemment pas apparaître dans les résultats. Pour cette raison, un problème d’indexation peut finir par gaspiller totalement tout votre contenu de haute qualité et votre travail d’optimisation de la page.
Si vous n’êtes pas sûr que vos pages Web soient correctement indexées, ou si vous avez besoin de conseils pour résoudre un problème d’indexation, cet article est fait pour vous. Nous allons examiner comment fonctionne l’indexation, quels sont les problèmes d’indexation les plus courants et comment vous pouvez apporter les modifications nécessaires pour vous assurer que vous ne souffrez plus de problèmes d’indexation.
- Fonctionnement de l’indexation
- Pourquoi certaines pages ne devraient pas être indexées
- Il y a trois raisons pour lesquelles ce serait une mauvaise idée de répertorier absolument tous les liens en direct dans un index de recherche:
- Comment voir si une page a été indexée
- Raisons courantes pour lesquelles une page n’est pas indexée
- Les conséquences des problèmes d’indexation
- Savoir quand une page sera indexée
- Comment revoir votre configuration Web pour l’indexation
- Où l’indexation s’inscrit dans votre stratégie de référencement
- Utilisation d’index pour la recherche sur les concurrents
- Comment vérifier si votre page est indexée
Fonctionnement de l’indexation
Lorsque de nouveaux sites Web ou pages sont hébergés en ligne, ils ne s’annoncent pas aux moteurs de recherche — les moteurs doivent faire le travail pour les trouver. La façon dont ils le font est par le biais de robots de moteur de recherche (autrement appelés robots d’exploration). Les robots d’exploration, comme leur nom l’indique, parcourent les sites Web en suivant des liens internes et externes dans le but d’indexer et d’organiser tout le contenu qu’ils trouvent.
Toutes les données collectées en cours de route sont stockées dans l’index, prêtes à l’emploi par le moteur de recherche. Lorsqu’un utilisateur soumet une requête de recherche, le moteur de recherche effectue les opérations suivantes:
- Analysez la requête pour juger au mieux l’intention du chercheur.
- Filtrez l’index en fonction de l’intention déduite.
- Sélectionnez toutes les pages jugées appropriées (en tenant compte d’un grand nombre de facteurs).
- Présentez-les à l’utilisateur par ordre de pertinence.
Étant donné que les pages sont régulièrement mises à jour, que leur qualité et leur pertinence sont en hausse ou en baisse par rapport à des sujets particuliers, les robots d’exploration doivent retourner régulièrement sur des sites indexés. La fréquence à laquelle un site est exploré dépendra de la fréquence à laquelle il change, de l’autorité dont il est considéré comme titulaire et de nombreuses autres mesures.
Pourquoi certaines pages ne devraient pas être indexées
Les index de recherche ne sont pas seulement des bases de données de tout ce qui est trouvé par les robots d’exploration.
Il y a trois raisons pour lesquelles ce serait une mauvaise idée de répertorier absolument tous les liens en direct dans un index de recherche:
- Le but d’un index de recherche est de stocker des pages pertinentes pour l’intention du chercheur, et certaines pages (et types de pages) ne contiennent pas de tels contenus et ne valent pas la peine d’être incluses. Par exemple, les sites Web avec des filtres de produits peuvent souvent générer automatiquement de longues listes d’URL différentes pour les vues filtrées ou triées, et beaucoup de ces vues n’intéresseront personne. De plus, si plusieurs pages ont le même contenu, une seule d’entre elles doit être renvoyée : les chercheurs ne bénéficient pas de plusieurs résultats avec le même contenu.
- Tout comme une page doit convenir du point de vue du contenu, elle doit également être au niveau du point de vue technique. Si un utilisateur clique sur un lien de résultat de recherche et que la page ne se charge jamais, ou ouvre des fenêtres contextuelles de spam, ou fournit une expérience utilisateur inacceptable, cela se reflète mal sur le moteur de recherche et décourage l’utilisateur.
- Les moteurs de recherche veulent que les propriétaires de sites Web s’auto-organisent car il n’y a aucun avantage à inclure des pages que les propriétaires ne veulent pas indexer. Parfois, les propriétaires de sites Web veulent conserver du contenu pour la postérité, mais choisissent de l’archiver car il est obsolète et / ou inadapté à l’objectif. Les résultats de recherche doivent être conservés sur les pages les plus intéressantes, et ce sont les pages que les propriétaires de sites Web souhaitent activement voir.
Par conséquent, diverses choses peuvent conduire à ce qu’une page ne soit pas indexée par un fournisseur de recherche. Non seulement le robot d’exploration peut décider qu’une page ne vaut pas la peine d’être incluse, mais le propriétaire du site Web peut signifier qu’une page ne doit pas être indexée, et même étiqueter des liens spécifiques pour dire aux robots d’exploration de ne pas les suivre en premier lieu.
Comment voir si une page a été indexée
Pour voir si une page a été indexée par Google, utilisez notre vérificateur d’index Google gratuit. Vous pouvez utiliser cet outil pour vérifier jusqu’à 10 URL en masse en même temps. Si une page n’est pas indexée, elle vous indiquera si le domaine au moins est indexé (ce qui signifie que d’autres pages du domaine sont indexées).
Raisons courantes pour lesquelles une page n’est pas indexée
Comme indiqué, il existe de nombreuses raisons pour lesquelles une page n’est pas indexée. Voici les plus courants:
- Les robots ne le trouvent pas. Si votre site Web ne dispose pas d’un plan de site XML complet (une liste de toutes les pages à indexer) ou de liens internes vers une page particulière ou qu’il est enfoui profondément dans des dossiers, souvent, un robot d’exploration ne pourra pas le trouver et ne pourra donc pas l’indexer.
- La page est définie sur ‘noindex’. Même si vous avez un lien interne vers une page ou un lien externe pointant vers elle depuis un autre domaine, la page peut avoir été étiquetée comme « noindex », ce qui conduit les robots d’exploration à l’ignorer.
- Il est bloqué dans les robots.txt. Chaque serveur Web fournit un fichier appelé robot.txt qui contient des instructions pour les robots d’exploration. Si un robot.le fichier txt interdit à tous les robots d’indexation d’indexer le site, c’est évidemment un énorme problème. Bien que cela soit rare, il n’est pas si rare qu’un développeur essaie de bloquer des pages spécifiques, mais finit accidentellement par en bloquer beaucoup plus au cours du processus.
- Le niveau de qualité n’est pas assez élevé. Si votre domaine comporte des liens de faible valeur et ne contient pas assez de contenu (ou pas de contenu du tout), les moteurs de recherche peuvent décider de ne pas classer certaines ou toutes vos pages dans le but de maintenir un niveau élevé.
Il existe diverses autres causes possibles pour que les pages ne soient pas indexées, mais elles peuvent être assez complexes techniquement et dépendent de la nature exacte de votre site. Dans la grande majorité des cas, l’explication sera l’une de celles énumérées ci-dessus.
Les conséquences des problèmes d’indexation
La mesure dans laquelle un site Web est affecté par les problèmes d’indexation dépend de la nature et de l’ampleur des problèmes ainsi que des pages qu’ils affectent. Si une page mineure de votre site n’est pas indexée, ce n’est pas la fin du monde, mais si un contenu à feuilles persistantes de haute qualité n’est pas indexé, c’est un gaspillage d’efforts considérable.
Et pour les sites web du secteur du commerce électronique, l’indexation est encore plus importante. Le trafic organique est de loin la forme de trafic la plus rentable pour les pages de produits, car il ne coûte rien d’apparaître dans les résultats de recherche, contrairement à la publicité PPC ou sur les réseaux sociaux. Si la moitié des produits d’une entreprise ne sont pas indexés, les possibilités de conversion sont considérablement réduites.
Savoir quand une page sera indexée
Il est très courant que les propriétaires de sites Web posent une question particulière: quand ma page sera-t-elle indexée? Malheureusement, il n’y a aucun moyen de le savoir de manière concluante. Même si vous faites absolument tout correctement, en suivant strictement les directives fournies par Google et d’autres fournisseurs de recherche, cela dépendra de facteurs hors de votre contrôle.
Étant donné que les index de recherche englobent des millions et des millions de pages du monde entier et doivent constamment actualiser leurs analyses pour garantir des informations à jour, votre page pourrait être indexée demain, la semaine prochaine ou dans quelques mois.
La durabilité n’est possible que par l’efficacité opérationnelle, et il n’y a aucune efficacité ou valeur à faire un effort pour indexer absolument tout en urgence. C’est pourquoi Google parle d’avoir un budget d’exploration qui détermine la fréquence à laquelle une page est explorée.
Comment revoir votre configuration Web pour l’indexation
Pour vous assurer que les pages indexées restent correctement indexées, que de nouvelles pages sont ajoutées à cette liste et que les pages indésirables ne sont pas incluses, il est important pour toute entreprise ayant une grande présence sur le Web de consacrer du temps et des ressources à ce problème de référencement spécifique.
Sur une base assez régulière (peut-être tous les trois mois environ), vous devez effectuer un examen approfondi des éléments suivants:
- L’architecture d’information de votre site web. Tout fonctionne-t-il comme il se doit d’un point de vue technique? Le serveur gère-t-il la charge comme il se doit ?
- Votre structure de liaison interne. Avez-vous suffisamment de liens internes pour prendre en charge l’exploration régulière? Vous pouvez être assez libéral avec les liens internes car ils fournissent un contexte utile, mais n’allez pas trop loin avec eux car cela risquera une pénalité.
- Configuration de votre fil d’ariane. Les pages sont-elles imbriquées correctement et définies dans les bonnes catégories ? Le maintien d’une structure interne logique est très important pour montrer aux moteurs de recherche que vos pages valent la peine d’être indexées.
Bien que cela ne vous oblige pas à devenir un expert en informatique, vous devrez soit vous familiariser avec tous ces concepts, soit consulter quelqu’un qui sait exactement comment vérifier ces choses et apporter les modifications requises.
Où l’indexation s’inscrit dans votre stratégie de référencement
Lorsque les entreprises réfléchissent à la façon dont le référencement joue dans leurs stratégies marketing, elles ont tendance à considérer les considérations techniques de référencement comme des préoccupations peu prioritaires. D’autres considérations de référencement, telles que le marketing de contenu ou la sensibilisation aux médias sociaux, sont plus créatives et sont donc considérées comme plus glamour et intéressantes.
Le problème avec cette ligne de pensée, bien sûr, est que négliger les fondamentaux techniques est extrêmement stupide. Si votre budget pour une longue campagne de publicité payante, de travail sur les médias sociaux, de production de contenu et de promotion de la marque, mais que vous ne réalisez pas que vous construisez une autorité autour d’une page qui ne peut pas être indexée dans Google, cela représentera un investissement futile — dès la fin de la campagne, votre trafic disparaîtra à nouveau.
Utilisation d’index pour la recherche sur les concurrents
En laissant de côté votre propre indexation, il y a un autre aspect des index de recherche qui mérite une mention: la recherche sur les concurrents. En regardant les pages de l’index de votre concurrent (et celles qui ne le sont pas), vous pouvez avoir une idée de ce qu’ils font et avoir la possibilité de désosser leurs stratégies.
Pensez simplement à la quantité d’informations qui vous est facilement accessible sans frais grâce à de simples recherches sur Google. Si vous investissez un peu de temps dans l’examen de la façon dont les autres entreprises de votre secteur gèrent l’indexation, les backlinks et les résultats de recherche en général, vous en tirerez beaucoup.
Comment vérifier si votre page est indexée
Construire un site Web en une présence en ligne hautement compétitive est difficile dans le meilleur des cas, peu importe la quantité de contenu que vous avez ou la qualité de votre engagement avec votre public. Cela prend du temps et de la cohérence, et il y a beaucoup d’autres excellents sites qui valent la peine d’être classés au-dessus de vous si vous laissez tomber vos normes.
Parce que vous devez investir beaucoup de temps et d’efforts dans le contenu, la diffusion et le développement de l’expérience utilisateur, il est absolument primordial de vous assurer de ne pas être freiné par un problème technique fondamental comme le fait que les pages importantes ne soient pas indexées.
Nous avons couvert ce qu’est l’indexation, pourquoi elle est si importante et comment vous pouvez prendre des mesures pour identifier et surmonter les problèmes d’indexation courants. Le reste dépend de vous. Trouvez le temps de revoir votre configuration en profondeur et planifiez des révisions semi-fréquentes pour vous assurer que vos efforts ne sont pas compromis par des problèmes techniques évitables.
Kayleigh Toyra: Stratège de contenu
Marketing mi-finlandais, mi-britannique basé à Bristol. J’aime écrire et explorer des thèmes comme la narration et le marketing de l’expérience client. Je gère une petite équipe de rédacteurs dans une agence boutique.