Wie oft crawlt Google eine Website?

Es ist die Stunde der Wahrheit! Ihre neue Website ist live, und Sie brauchen Leute zu besuchen. Sie stellen also wahrscheinlich die Frage: Wie kann ich Google dazu bringen, meine Website zu crawlen?

Wir haben alle einen Film gesehen, in dem jemand eine Website erstellt und ‚live setzt‘ und innerhalb von Minuten der Laptop ‚Dellen‘, weil jemand zu Besuch ist.

Obwohl dies eine wirklich lustige Vorstellung ist und wir viele bezahlte Kampagnen durchgeführt und mit angehaltenem Atem beobachtet haben, wie die Klicks einrollen, stellt sich immer noch die Frage:

Wie kann ich Google dazu bringen, meine Website zu crawlen, wie oft crawlt Google eine Website und kann ich den Crawling-Prozess beschleunigen? Dieser Blogbeitrag wird diese Frage beantworten.

Es ist die Stunde der Wahrheit! Ihre neue Website ist live, und Sie brauchen Leute zu besuchen. Sie stellen also wahrscheinlich die Frage: Wie kann ich Google dazu bringen, meine Website zu crawlen?

Wir haben alle einen Film gesehen, in dem jemand eine Website erstellt und ‚live setzt‘ und innerhalb von Minuten der Laptop ‚Dellen‘, weil jemand zu Besuch ist.

Während dies eine wirklich lustige Vorstellung ist, und während wir viele bezahlte Kampagnen durchgeführt und mit angehaltenem Atem beobachtet haben, wie die Klicks einrollen, stellt sich immer noch die Frage:

In einem Webmaster-Hangout fragte ein Web-Publisher, wie schnell Google Seiten aus dem Index entfernt habe, wenn sie einen Noindex nofollow hinzugefügt hätten. Der Herausgeber saidthey hatte noindex hinzugefügt, aber die Seite blieb im Google-Index. John Mueller von Google erklärte dies mit einer Antwort, die einige interessante Fakten darüber enthüllte, wie Webseiten indiziert werden.

John Mueller enthüllte, dass URLs von Google mit unterschiedlichen Raten gecrawlt werden. Das ist nicht wirklich überraschend. Überraschend war, dass er sagte, dass einige URLs nur alle sechs Monate gecrawlt werden können!

genau das hat John Mueller gesagt

„Ich denke, der schwierige Teil hier ist, dass wir URLs nicht immer mit der gleichen Häufigkeit crawlen. Daher werden einige URLs täglich gecrawlt. Einige URLs vielleicht wöchentlich. Andere URLs alle paar Monate, vielleicht sogar jedes halbe Jahr oder so.

Wir versuchen also, die richtige Balance zu finden, damit wir Ihren Server nicht überlasten.

Und wenn Sie auf Ihrer Website auf der ganzen Linie wesentliche Änderungen vorgenommen haben, werden wahrscheinlich viele dieser Änderungen ziemlich schnell übernommen, aber es werden einige übrig bleiben.

Wenn Sie also beispielsweise Site-Abfragen durchführen, besteht die Möglichkeit, dass Sie URLs sehen, die wie jedes halbe Jahr gecrawlt werden. Sie werden nach ein paar Monaten immer noch da sein.

Und das ist irgendwie … die normale Zeit für uns, Dinge neu zu verarbeiten / neu zu crawlen. Es ist also nicht unbedingt ein Zeichen dafür, dass etwas technisch völlig kaputt ist.

Aber es bedeutet, dass, wenn Sie denken, dass diese URLs wirklich überhaupt nicht indiziert werden sollten, dann können Sie das vielleicht irgendwie sichern und sagen, hier ist eine Sitemap-Datei mit dem letzten Änderungsdatum, so dass Google losgeht und versucht, diese ein bisschen schneller als sonst zu überprüfen.“

Search Engine Journal hat einen Artikel zu diesem Hangout veröffentlicht.

Wenn es also um organische Inhalte geht, wie kann ich Google dazu bringen, meine Website zu crawlen, wie oft crawlt Google eine Website und kann ich den Crawling-Prozess beschleunigen, um mehr Website-Traffic zu erzielen? Dieser Blogbeitrag wird diese Frage beantworten.

Warum müssen Sie Ihre Website indizieren?

Wenn Ihre Website in den Suchergebnissen angezeigt werden soll, muss sie indiziert werden. Obwohl wir einige kleine Geschäftskunden haben, die mit ihren Websites nicht immer nach SEO suchen (sie verwenden sie als Visitenkarte), müssen Sie dennoch indiziert sein, um überhaupt gefunden zu werden.

Und Sie möchten nicht, dass Ihre Site nur einmal indiziert wird. Sie möchten, dass Google (und andere Suchmaschinen) dies weiterhin tun.

Suchmaschinen wie Google aktualisieren nicht nur automatisch. Sie benutzen Spinnen. Keine echten Spinnen. Das wäre zu beängstigend. Ich spreche von Codeschnipseln, die das Web durchforsten.

Was genau ist ein Webcrawler?

Die Aufgabe der freundlichen Spinne besteht darin, nach neuen Inhalten zu suchen und die bereits indizierte Version Ihrer Website zu aktualisieren. Unter neuem Material kann eine neue Seite, ein neuer Blog oder Änderungen an einer vorhandenen Seite verstanden werden.

Laut der wunderbaren Wikipedia ist ein Webcrawler, der manchmal als Spider oder Spiderbot bezeichnet und oft als Crawler abgekürzt wird, ein Internet-Bot, der systematisch im World Wide Web surft, typischerweise zum Zwecke der Web-Indizierung (Web-Spidering).

Suchmaschinen-Crawler suchen nach URLs auf Ihrer Website und platzieren sie im Grunde an der richtigen Stelle oder an der Stelle, die sie für richtig halten.

Googles Crawler heißt Googlebot. Es durchsucht Websites und fügt alle Informationen auf einer Seite einem Google-Index hinzu, damit es die Informationen später finden kann, wenn jemand dieses Thema in einer Suchmaschine sucht.

Wie crawlt Google Websites?

Crawling ist, wenn Google Ihre Website mit seinem Spider Crawler besucht. Es ist nichts Beängstigendes, nur eine kleine Spinne, die durch alle Seiten Ihrer Website kriecht. Nach dem Crawlen indiziert Google Ihre Website.

Aber was ist eigentlich ein Google Crawl? Einfach ausgedrückt, folgt der Googlebot einem Pfad durch Ihre Website. über eine Sitemap, falls vorhanden, oder über deren Seiten und verlinkte Seiten. Aus diesem Grund benötigen Sie eine wirklich gute Site-Struktur.

Indizierung ist der Prozess des Hinzufügens der gecrawlten Seiten zu einem Index. eher wie eine gelbe Seiten, der Index ist eine riesige Datenbank von Web-Seiten. Google und andere Suchmaschinen können sie dann bereitstellen, wenn Sie online nach etwas suchen.

Jetzt ist die Suchmaschine nur so gut wie der Code und der Inhalt Ihrer Website. Wenn Sie möchten, dass Google Ihre Website indiziert, muss sie den Webstandards entsprechen. Einige Seiten werden möglicherweise nicht indiziert, wenn sie Fehler aufweisen, z. B. nicht mobilfreundlich. oder Google kann sich dafür entscheiden, keine doppelten Inhalte zu crawlen. Vorbei sind die Zeiten, in denen mehrere Seiten mit nur einem Wort optimiert wurden. Google entscheidet, welche Seite indiziert werden soll, und ignoriert die anderen.

Wo wird Google meine Inhalte indexieren?

Früher war es einfach. Füllen Sie einfach das Schlüsselwort so oft wie möglich in die Seite ein. Aber komm schon, das ist lächerlich, weil es dem Benutzer keine Qualität bietet! Glücklicherweise sind Suchmaschinen viel klüger geworden als früher.

Glücklicherweise wird das Einfügen von Schlüsselwörtern in Ihre Inhalte (und Meta-Tags) heutzutage nicht nur von Suchmaschinen ignoriert, sondern wahrscheinlich auch bestraft. möglicherweise wird Ihre Website sogar auf die schwarze Liste gesetzt und vollständig aus den Serps entfernt. was bedeutet, dass Sie für nichts rangieren werden. aber warum?

Weil der Algorithmus von Google sich jetzt viel mehr mit der allgemeinen Benutzererfahrung und der sogenannten Suchabsicht befasst. – Warum sucht diese Person nach einem bestimmten Suchbegriff? Normalerweise ist es einer von vier „Ich möchte gehen, ich möchte wissen, ich möchte kaufen oder ich möchte lernen“ Mikromomente von Google angegeben.

Und deshalb ist die Indizierung so wichtig. Regelmäßige Indizierung verbessert auch Ihre Suchergebnisse insgesamt. Wenn Sie bei der Suche einen höheren Rang einnehmen möchten, probieren Sie es aus und sehen Sie! Wenn der Webcrawler Änderungen an Ihrer Website feststellt, werden diese im durchsuchbaren Index von Google aktualisiert. Die Seiten werden nur dann zum Index hinzugefügt, wenn sie den Webmaster-Standards entsprechen und nichts Black Hat machen.

Wenn der Crawler Änderungen auf Ihrer Website sieht, verarbeitet er diese Änderungen, analysiert den Inhalt und den Code und fügt sie gut in den Index ein. Das ist es wirklich.

Wenn ein Nutzer etwas in Google eingibt, entscheidet der Algorithmus, wo Ihre Seite im Vergleich zu allen anderen Seiten, die sich auf diese Wörter beziehen, eingestuft werden soll. Ich denke, es ist ein bisschen wie die Musik-Charts. Je beliebter eine Seite ist, desto höher steigt sie.

Was sind die wichtigsten Indexierungsfaktoren?

Wir aktualisieren unsere Website ziemlich oft und infolgedessen wird sie alle paar Tage, manchmal täglich, gecrawlt. In der Regel möchten Sie häufig krabbeln. es ist, als würde Google daran interessiert sein, was los ist. Überprüfen Sie in der Google Search Console, wann Ihre Website zuletzt gecrawlt wurde. hier sind einige Faktoren, die es für Google besser machen:

Geschwindigkeit. – Dies bedeutet eine bessere Erfahrung für Ihre Benutzer. je besser die Erfahrung, desto höher wird Ihre Website rangieren. Je schneller eine Website, desto einfacher zu indizieren. Ich benutze SEMrush, um Websites zu überprüfen, und wenn eine Seite langsam ist, kommt es manchmal zu einer Zeitüberschreitung mit SEMrush. Google hat nicht den ganzen Tag Zeit, also stellen Sie sicher, dass Ihre Seiten schnell sind.

Sie können auch helfen, indem Sie Ihre Sitemaps einreichen. aber darauf werde ich später noch näher eingehen. Kommen wir zu den Schritten, um Ihre Website zu indizieren.

Schritt 1: Bin ich bereits indiziert?

Führen Sie eine schnelle Überprüfung durch, indem Sie site: gefolgt von Ihrer Domain in Google eingeben. Dadurch erfahren Sie, ob Ihre Seiten bei Google sind und wie viele es gibt.

Schritt 2: Richten Sie die Search Console und Google Analytics ein.

Wenn Sie die Google Search Console (ehemals Google Webmaster Tools) nicht zum Überwachen und Crawlen Ihrer Webseite verwenden, sollten Sie dies wirklich tun. Hier gibt es wertvolle Einblicke, die Sie sich nicht entgehen lassen dürfen. Auf diese Weise finden Sie heraus, was die Leute wirklich eingeben, um Ihre Webseiten zu finden.

Holen Sie sich ein Google Search Console-Konto und verbinden Sie Ihre Website damit. In diesem Beitrag wird nicht darauf eingegangen, wie dies zu tun ist, da davon ausgegangen wird, dass Sie über Google Analytics verfügen oder wahrscheinlich keine Fragen zu Google Crawl-Statistiken stellen.

Wissen Sie nur, Sie müssen überprüfen, ob Sie der Websitebesitzer sind. Dies ist einfach, wenn Sie Google Analytics auf Ihrer Website eingerichtet haben. Alles, was Sie tun müssen, ist Ihre Domain über die Search Console hinzuzufügen, und Sie erhalten eine Reihe von Möglichkeiten zur Überprüfung. Der einfachste Weg ist über Google Analytics.

Die Google Search Console (ein kostenloser Dienst) gibt Ihnen spezifische Daten darüber, wie oft Google Crawler Ihre Website besucht.

Es sieht so aus:

Zum Zeitpunkt der Aktualisierung dieses Beitrags. Google Search Console speichert die letzten sechzehn Monate der Website-Daten und kann Ihnen einige erstaunliche Einblicke in Ihre Website geben. Wie Sie gefunden werden, nach welchen Schlüsselbegriffen Sie suchen und wie oft Benutzer auf diese Suchergebnisse klicken.

Sie können die Ergebnisse Jahr für Jahr oder mit einem ähnlichen Zeitraum vergleichen. zum Beispiel können Sie die letzten drei Monate mit den vorherigen drei Monaten vergleichen.

Sie können auch eine Liste der URLs oder Seiten anzeigen, die für jeden Suchbegriff bereitgestellt wurden. Noch nützlicher ist, dass Sie die Top-Seiten anzeigen können, die den Traffic auf Ihre Website lenken, und die Suchbegriffe, die eine Impression für Ihre Zielseite ausgelöst haben. Dies ist ein wirklich nützliches Tool, um Keyword-Opprtunities auszurotten und zu sehen, wo Sie rangieren könnten, wenn Sie es noch nicht tun.

Google Search Console ist in dieser Hinsicht so viel mehr als ein Fehlermonitor. Es ist ein brillantes Keyword-Recherche-Tool.

Wenn Sie eine WordPress-Website haben, installieren Sie Google Site Kit. Es kümmert sich um all dies für Sie in ein paar einfachen Klicks.

Schritt 3: Erstellen Sie eine Content-Marketing-Strategie & Blog

Die meisten Websitebesitzer gehen einfach davon aus, dass es ausreicht, Inhalte hinzuzufügen und einige Schlüsselwörter einzufügen. sie müssen eine Content-Strategie rund um Suchmaschinenergebnisse entwickeln, wenn Sie gefunden und indiziert werden möchten.

Erstellen Sie einen Plan für Ihre Inhalte, basierend auf Keyword-Recherche, Keyword-Schwierigkeit und Suchvolumen. Es ist ein guter Ausgangspunkt. Als ich mein digitales Geschäft begann, hatte ich auch den Eindruck, dass ich nur Inhalte hinzufügen musste. als digitale Agentur haben wir Inhalte, die unsere Projekte abdecken, und sogar Unternehmensnachrichten.

Im Laufe der Zeit erfuhr ich, wie wenig Leute, die nichts über Ihr Unternehmen wissen, an Ihren Unternehmensnachrichten interessiert sind. sie müssen Inhalte basierend auf Themen erstellen, nach denen Benutzer suchen, und in Ihrer Nische. Beginnen Sie nicht, Beiträge zu nicht verwandten Themen zu schreiben. .

Eine kürzlich durchgeführte Hubspot-Studie ergab, dass 40% der Vermarkter sagen, dass Content-Marketing ein sehr wichtiger Teil ihrer gesamten Marketingstrategie ist. (Quelle: https://www.hubspot.com/marketing-statistics).

Versuchen Sie, informative, nützliche und interessante Inhalte zu veröffentlichen. Es interessiert niemanden, ob Ihr Unternehmen gerade 10 geworden ist.

Verwenden Sie Infografiken wie diese 2020 Content Marketing Infografik

Wenn Sie Inhalte erstellen, erstellen Sie diese nicht nur für sich selbst, sondern auch für Gastbeiträge auf anderen seriösen Websites. umgekehrt verlinken Sie nicht von Spam-Sites auf Ihre Website. Google geht davon aus, dass Sie Spam sind.

Wir empfehlen Neil Patels Content Strategy. Hier ist sein Rahmen.

• Was sind deine Ziele? Geben Sie INTELLIGENTE Ziele an und wie Sie Ihren Fortschritt messen (z. B. Metriken).
• Wer ist Ihre Zielgruppe? Kundenprofile oder Personas sind wichtig, um Ihre Zielgruppe zu verstehen und was sie wollen / brauchen.
• Welche Arten von Inhalten werden Sie produzieren? Sie möchten sicherstellen, dass Sie die Art von Inhalten bereitstellen, die Ihre Zielgruppe sehen möchte.
• Wo wird es veröffentlicht? Natürlich hosten Sie Ihre eigenen Inhalte auf Ihrer Website, aber Sie möchten möglicherweise auch andere Websites erreichen oder Plattformen wie YouTube, LinkedIn und Slideshare nutzen.
• Wie oft werden Sie Ihre Inhalte veröffentlichen? Es ist viel besser, einen gut geschriebenen, qualitativ hochwertigen Artikel pro Woche konsequent zu produzieren, als jeden Tag für eine Woche zu veröffentlichen und dann nichts für einen Monat zu veröffentlichen. Konsistenz ist der Schlüssel.
• Welche Systeme werden Sie für die Veröffentlichung Ihrer Inhalte verwenden? Systeme sind im Grunde nur wiederholbare Routinen und Schritte, um eine komplexe Aufgabe zu erledigen. Sie helfen Ihnen, Zeit zu sparen und Ihre Inhalte schneller zu schreiben, damit Sie Ihren Zeitplan einhalten können. Alles, was Ihnen hilft, Inhalte in kürzerer Zeit zu veröffentlichen, ohne die Qualität zu beeinträchtigen, verbessert Ihr Endergebnis.
• Geben Sie die Blogging- / Content-Tools und -Technologien an, die Sie verwenden, und wie sie in Ihr System passen.

Sobald Sie Ihre Strategie festgelegt haben, beginnen Sie mit dem Schreiben. Sie müssen sich dazu verpflichten, und es erfordert viel Mühe. vor allem, wenn Sie kein großes Unternehmen mit einem Team von Content-Autoren sind. Ich saß an einem Samstagnachmittag zu Hause und aktualisierte diesen Blogbeitrag. dies ist jedoch eine meiner meistbesuchten Seiten und daher lohnt es sich, den Traffic auf unsere Website zu lenken.

Sie sollten bloggen, auch wenn Sie eine E-Commerce-Website haben. wenn Sie neue Produkte haben, schreiben Sie darüber. können Sie über Lifestyle-Themen im Zusammenhang mit Ihren Produkten schreiben? wenn Sie beispielsweise eine Website haben, auf der Nahrungsergänzungsmittel verkauft werden, schreiben Sie über gesunde Lebensstilthemen und verlinken Sie auf Ihre Produkte.

Schritt 4: Haben Sie eine Verknüpfungsstrategie

Interne Links, was bedeutet, dass die Verknüpfung mit anderen Seiten auf Ihrer Website eine der besten SEO-Quick-Wins ist, die ich kenne. Erstens haben Sie viele Links in Ihrer Website-Navigation. Ihre Website-Struktur ist wichtig, und Themen und Themen sollten gruppiert werden.

Stellen Sie sicher, dass Sie freundliche URLs haben. damit meine ich, dass sie nicht zu lang sein sollten und Wörter enthalten sollten, nicht Gobledegook.

Verwenden Sie eine Seitenleiste in Ihrem Blog, um auf Ihre beliebtesten Seiten und Beiträge zu verlinken. Sie können sogar manuelle Links zu verwandten Themen erstellen, z. B. verwandte Beiträge: Warum Ihre Website-Struktur wichtig ist.

Diese Art des Linkaufbaus ermutigt den Google-Bot, zurückzukommen und erneut zu kriechen. Es hält Benutzer auch länger auf Ihrer Website und bietet ihnen (hoffentlich) nützlichere Inhalte.

Schritt 5: Nutzen Sie soziale Medien

Wenn Sie keine Social-Media-Profile für Ihre Website haben, tun Sie es jetzt. eine Komponente der Suchmaschinenoptimierung 2020 ist die Beachtung von Social-Media-Signalen. Obwohl sie ‚Nofollow‘ sind, scheinen sie Ihrem Website-Ranking etwas Gewicht zu verleihen.

Einrichten von Facebook-Seiten, Twitter-Profilen, LinkedIn-Profilen oder Unternehmensseiten, Pinterest, YouTube-Kanälen und insbesondere Google My Business-Seiten. Wenn Ihr Unternehmen separate Marken oder Projekte hat, kann es sich auch lohnen, Social-Media-Profile nur für diese einzurichten.

Und wenn Sie diese Profile erstellen, müssen Sie sie natürlich auf dem neuesten Stand halten,

Wie oft crawlt Google eine Website?

Wenn das Gehirn Ihres Perfektionisten fragt: „Was ist die genaue Google Webcrawler-Frequenz?“, weiß niemand. Es hängt von Ihrer Domain Authority, Ihren Backlinks und allen Einschränkungen ab. Es gibt auch Faktoren, die Ihr Crawl-Budget verschwenden können, z. B. Weiterleitungen und Seiten in Ihrer Sitemap, die nicht mehr vorhanden sind.

In Googles Worten crawlen ihre Roboterspinnen „regelmäßig“ Webinhalte, um den großen Index zu aktualisieren, der zum Erstellen der SERPs (Search Engine Results Page) verwendet wird.

Diese Crawls führen zu Änderungen an den SERPs, die kurz nach der Aktualisierung des Index angezeigt werden. Dies kann bedeuten, dass Sie Änderungen jederzeit von wenigen Augenblicken bis zu einigen Tagen sehen können. Auch hier weiß es niemand wirklich, da alles von einem magischen Algorithmus erledigt wird. Ok, es ist nicht wirklich magisch, aber es ist ziemlich mystisch.

Je mehr Besucher Sie erhalten, desto mehr wird Ihre Website in der Regel gecrawlt. Googlebots verschwenden keine Zeit damit, Websites zu crawlen, die nie besucht werden.

Kann ich den Prozess beschleunigen?

Wenn Sie eine Änderung an einer Seite Ihrer Website vornehmen, z. B. wenn Sie sie neu schreiben, den Inhalt aktualisieren oder die Onpage-SEO verbessern, können Sie die URL erneut in der Search Console einreichen. Normalerweise werden Sie ziemlich schnell neu indiziert. Nach meiner Erfahrung ist es ungefähr eine Minute.

Verbesserungen an einer Webseite können ihre Position erhöhen, sobald sie neu indiziert wird.

Obwohl Sie keine direkte Kontrolle darüber haben, wann Google Ihre Seiten crawlt, gibt es ein paar Dinge, die Sie tun können, um sie zu ermutigen.

Sitemaps & Fehlerprüfung

.Eine XML-Sitemap ist eine Möglichkeit, sicherzustellen, dass die Google Search Console über Ihre neuen Inhalte informiert ist. Wenn Sie mit einem beliebten Content-Management-System wie WordPress arbeiten, können Sie problemlos Sitemaps generieren und an die Search Console senden.

Überprüfen Sie auch die mobile Benutzerfreundlichkeit. Sie müssen wissen, dass Ihre Website 100% mobilfreundlich ist. Das Bild hier zeigt kleinere Probleme im Laufe der Zeit, aber alle wurden behoben, wenn sie entdeckt wurden.

Seitengeschwindigkeit und Konnektivität.

Wenn Google Ihre Website aufgrund eines Serverfehlers nicht crawlen kann, wird das Crawlen Ihrer Website gestoppt. In diesem Fall können Ihre Rankings sinken. Um dies zu verdeutlichen, sprechen wir hier nicht von vorübergehenden Fehlern, aber wenn Ihre Website für längere Zeit nicht verfügbar ist, werden keine Bots mehr gesendet.

Vorteile häufiger Inhalte.

Wenn Sie Ihrer Website häufig neue Inhalte hinzufügen, lernt Google, diese häufiger zu crawlen. Es ist keine Raketenwissenschaft.

Es kann schwierig sein, neue Inhalte zu erstellen, aber der einfachste Weg, dies zu tun, besteht darin, Ihrer Website einen Blog hinzuzufügen und ihn mit Informationen zu Ihrer Branche zu füllen.

Sie können über alles bloggen, was Sie möchten, um fair zu sein, aber Google erhält einen fairen Überblick darüber, worum es auf Ihrer Website geht, wenn Sie sie relevant halten. Zum Beispiel schreiben wir hauptsächlich über Google Ads und SEO Insights, wie man mit Agenturen zusammenarbeitet und alles, was wir im Bereich der digitalen Agentur gemacht haben.

Intern und Backlinking

Interne Links und eingehende Links sind immer noch ein wichtiger Weg, um bei Google gefunden zu werden. Wenn Google feststellt, dass Ihre Inhalte von anderen Plattformen veröffentlicht und geteilt werden, werden Sie dafür belohnt.

Seien Sie jedoch vorsichtig und vermeiden Sie Spam-Verzeichnislisten und Black-Hat-Techniken. Das allmächtige Google kann Sie bestrafen und belohnen, und schwarze Flecken sind schwer zu erkennen.

Die Roboter.txt-Datei.

Dies ist eine einfache Textdatei, die sich in Ihrem Stammordner befinden sollte. Gelegentlich wird es vom Host gehandhabt, und Sie können es nicht bearbeiten, aber wenn Sie WordPress haben und ein Plugin wie Yoast oder RankMath haben, sollten Sie in der Lage sein, direkt darauf zuzugreifen.

Diese Datei gibt Crawlern Anweisungen, welche Seiten gecrawlt und welche ignoriert werden sollen. Auch hier können die oben genannten WordPress-Plugins dies für Sie erledigen. Wenn Sie sich fragen, warum es gut ist, Seiten zu deindexieren, ist das ein ganz anderes Thema, aber nicht jede Seite ist die Aufmerksamkeit von Google wert. wir indizieren unsere Kategorien und Tags nicht, da sie unsere absichtlichen Inhalte kannibalisieren können.

Wenn Sie sich nicht sicher sind, wie Sie auf diese Datei zugreifen oder sie konfigurieren sollen, wenden Sie sich an einen Experten. Wir sind erfahrene WordPress-Entwickler und können Ihnen dabei helfen.

Strukturierte Daten

Suchmaschinen lieben strukturierte Daten beim Crawlen und Indizieren. Fügen Sie Ihrer Website Schema-Markup hinzu, um Ihre Positionen in den Serps zu verbessern, wenn Sie eine Seite für das Webcrawling einreichen. Sie könnten sogar für ein Featured Snippet zeigen, was die begehrte Position Null bedeutet.

Benötigen Sie Hilfe bei qualitativ hochwertigen Inhalten oder stellen Sie sicher, dass Ihre Website zum Nutzen Ihres Unternehmens funktioniert? Sprechen Sie noch heute mit unserem Team und wir können Ihre Online-Präsenz kostenlos prüfen.

Über den Autor: Andi Wilkinson

Mit über 15 Jahren Erfahrung im Web & Digital Marketing schreibt und spricht Andi über eine Vielzahl von B2B-Themen und hilft einem Unternehmen, online zu wachsen. Made By Factory ist eine SEO-Agentur in Manchester. und PPC-Agentur in Manchester, die ehrgeizigen Unternehmen hilft, online zu wachsen.