So hindern Sie Suchmaschinen daran, eine Seite zu indizieren

Wenn Sie eine Website haben, haben Sie sich wahrscheinlich mindestens einmal gefragt, wie Sie Suchmaschinen daran hindern können, eine Seite zu indizieren.

Es gibt zahlreiche Szenarien, in denen ein solcher Schritt sinnvoll wäre, und es gibt mehrere Möglichkeiten, dies zu tun.

In diesem Leitfaden zeigen wir Ihnen, wie Sie verhindern können, dass Suchmaschinen eine oder mehrere Seiten Ihrer Website crawlen.

Warum sollten Sie Suchmaschinen daran hindern, eine Seite zu indizieren?

Die erste Frage, die Ihnen beim Lesen des Titels dieses Artikels möglicherweise in den Sinn kommt, lautet: „Warum sollte ich verhindern, dass Suchmaschinen meine Website indizieren?“

Und Sie haben völlig Recht, wenn Sie die Idee, Suchmaschinen zu blockieren, verwirrt sind. Schließlich geht es beim Aufbau einer Website darum, in Suchmaschinen zu ranken und nicht von ihnen ignoriert zu werden.

Es gibt jedoch mehrere Situationen, in denen es sinnvoll ist, Suchmaschinen daran zu hindern, eine Seite zu indizieren.

Vielleicht entwickeln Sie Ihre Website noch immer unter einem öffentlich zugänglichen Domainnamen und möchten nicht, dass Suchmaschinen Ihre Wartungsmodusseite indizieren.

Oder vielleicht erstellen Sie einen privaten Blog, der nicht für die Öffentlichkeit zugänglich sein soll.

Schließlich verwenden viele Menschen WordPress-Sites für das Intranet oder das Projektmanagement und möchten vermeiden, dass interne Dokumente Benutzern außerhalb Ihres Unternehmens zugänglich gemacht werden.

Welche Webseiten müssen nicht indiziert werden?

Abgesehen von den oben aufgeführten Gründen möchten Sie möglicherweise auch verhindern, dass Suchmaschinen verschiedene Seiten auf einer öffentlichen Live-Website indizieren.

Viele Blogbesitzer wissen das nicht, aber nicht alle Seiten einer Website müssen von Suchmaschinen indiziert werden.

Einige der Seiten, die Sie deindexieren sollten, umfassen die folgenden:

Admin- und Login-Seiten

Ihre Administrator- und Anmeldeseiten sollten nicht in den Google-Suchergebnissen erscheinen. Um zu verhindern, dass die Seiten indiziert werden, können Sie ihnen einfach ein noindex-Tag hinzufügen. Die einzigen Ausnahmen sollten jene Login-Seiten sein, die einer Community dienen.

Danke Seiten

Dies sind die Seiten, die Sie verwenden, um Ihren Newsletter-Abonnenten oder neuen Kunden/Kommentatoren zu danken. Sie gelten als Seiten mit dünnem Inhalt, und da sie für Suchmaschinen keinen Wert haben, sollten Sie sie nicht indizieren lassen.

Autorenarchive, wenn Sie der einzige Autor in Ihrem Blog sind

Google und andere Suchmaschinen betrachten möglicherweise Autorenseiten als Duplicate Content, wenn es nur einen Autor auf der gesamten Website gibt.

Sie können das Autorenarchiv entweder deaktivieren, um dies zu verhindern, aber wenn Sie es aus irgendeinem Grund behalten möchten, sollten Sie Ihre Autorenarchive nicht indizieren.

Interne Suchergebnisseiten

Eine interne Suchergebnisseite ist eine Seite, die zu Ergebnissen führt, wenn ein Benutzer eine Suche auf Ihrer Website mithilfe der Suchfunktion durchführt.

Sie sollten keine Ihrer internen Suchergebnisseiten von Suchmaschinen indizieren lassen, da sie die Erfahrung Ihrer Benutzer und Ihrer Website im Allgemeinen beeinträchtigen können.

Qualitätsrichtlinien von Google Geben Sie an, dass Sie das Crawlen von Suchergebnisseiten mithilfe von robots.txt verhindern sollten, da diese keinen Mehrwert für Benutzer bieten, die über eine Suchmaschine auf Ihre Website gelangen.

Wie kann man Suchmaschinen daran hindern, eine Seite zu indizieren?

Es gibt mehrere Möglichkeiten, Suchmaschinen davon abzuhalten, eine Seite zu indizieren. Am einfachsten ist es, das noindex-Tag einzufügen, aber wenn Sie dies aus irgendeinem Grund nicht tun können, gibt es andere Möglichkeiten, eine Seite zu deindexieren.

Hier ein kurzer Überblick über die gängigsten Methoden.

Fügen Sie einen „noindex“-Metatag hinzu

Das Hinzufügen eines „noindex“-Metatags zu einer Seite sendet ein Signal an Suchmaschinen, dass sie es nicht zum Suchindex hinzufügen können, obwohl sie es noch crawlen können.

Mit anderen Worten, wenn Sie einer Seite Ihrer Website ein noindex-Metatag hinzufügen, wird es nicht in den Suchmaschinenergebnissen angezeigt.

Die gute Nachricht ist, dass es ganz einfach ist, Metatags zu verwenden, um zu verhindern, dass eine bestimmte Seite Ihrer Website in SERPs angezeigt wird.

So geht’s.

  • Kopieren Sie das folgende Tag:
  • Fügen Sie es hinzu Abschnitt des HTML-Codes Ihrer Seite.

Gehen Sie dazu an den Anfang Ihrer Kopfzeile, indem Sie den Quellcode der Seite öffnen, die Sie deindexieren möchten, und das Tag in eine neue Zeile innerhalb der Kopfzeile einfügen.

Nachdem Sie das Tag hinzugefügt haben, indiziert die Suchmaschine die Seite nicht und sie erscheint nicht in den Suchergebnissen.

Beachten Sie, dass Sie dies für jede Seite tun müssen, die Sie deindexieren möchten.

Wenn Sie auch möchten, dass Suchmaschinen den Links auf der deindexierten Seite nicht folgen, sollten Sie stattdessen das Metatag „noindex,nofollow“ verwenden:

< META NAME =”robots” CONTENT =”noindex,nofollow”>.

Fügen Sie ein Meta-Robots-Tag hinzu

Der Zweck einer robots.txt-Datei besteht darin, den Crawlern von Suchmaschinen mitzuteilen, auf welche Seiten sie auf einer Website zugreifen können.

Laut Google können Sie ein Robots-Meta-Tag verwenden, wenn Sie steuern möchten, wie eine bestimmte Seite indiziert werden soll.

Das bedeutet, dass Sie bestimmte Mediendateien wie Bilder und Videos ausblenden können, damit sie in den Suchergebnissen angezeigt werden.

Das Einrichten Ihrer robots.txt-Datei ist ziemlich technisch, daher ist es eine gute Idee, die Entwicklerdokumentation von Google zu konsultieren.

Entfernen Sie die URL aus der Google Search Console

Diese Methode funktioniert nur für Google, aber es ist eine schnelle Möglichkeit, die beliebteste Suchmaschine von allen daran zu hindern, eine Seite auf Ihrer Website zu indizieren.

Dazu können Sie das Tool zum Entfernen von URLs von Google Webmaster verwenden. Laut Google sollten Sie diese Methode verwenden, wenn Sie eine bestimmte URL schnell aus der Google-Suche entfernen müssen.

Die fragliche URL muss sich in einer Search Console-Property befinden, die Ihnen gehört. Beachten Sie, dass diese Methode die URL nur vorübergehend blockiert.

So verwenden Sie das Google-Tool zum Entfernen von URLs, um Seiten aus den Suchmaschinenergebnissen auszuschließen.

  • Rufen Sie in der Search Console die Property der Website auf.
  • Wählen Sie „Temporary Hide“ und geben Sie die URL der Seite ein, die Sie ausschließen möchten.
  • Wählen Sie „URL aus Cache löschen und aus der Suche entfernen“.

Diese Aktion löscht die zwischengespeicherte Kopie der Seite aus dem Google-Index und blendet die Seite auch aus den Google-Suchergebnissen aus.

Verwenden Sie ein Plugin, um eine oder mehrere Seiten in Google nicht zu indizieren

Eine andere einfache Möglichkeit, eine einzelne Seite oder mehrere in Google nicht zu indexieren, ist die Verwendung eines Plugins.

Dies ist die perfekte Lösung für Anfänger, die nicht viel Programmiererfahrung haben und mit nur wenigen Klicks Seiten in Google noindexieren möchten.

Es gibt mehrere Plugins, die es einfach machen, Seiten in Google zu indizieren, wobei Yoast SEO, Rank Math und AIOSEO die beliebtesten sind.

Sehen wir uns an, wie Sie mit jedem dieser Plugins Seiten nicht indizieren können.

Yoast SEO

Wenn Sie Yoast SEO ausführen, müssen Sie nur eine einfache Einstellung ändern, um eine Seite nicht zu indizieren.

Gehen Sie zum Reiter Erweitert in der Yoast SEO-Metabox und wählen Sie „Nein“ für die Frage „Suchmaschinen erlauben, diesen Beitrag in den Suchergebnissen anzuzeigen?

Die Standardeinstellung für dieses Feld sollte normalerweise “Ja” sein und ist die Einstellung, die Sie wahrscheinlich bei der Installation von Yoast festgelegt haben.

Um Beiträge nicht zu indizieren, wählen Sie einfach manuell „Nein“ für jede Seite oder jeden Beitrag, die/der nicht in der Google-Suche angezeigt werden soll.

Wenn der Beitrag, den Sie deindexieren, bereits von Google gecrawlt wurde und in den Suchergebnissen erscheint, dauert es eine Weile, bis er verschwindet.

Yoast SEO geht davon aus, dass Sie Ihre Posts auf „no index, follow“ setzen möchten, was bedeutet, dass Google und andere Suchmaschinen weiterhin den Links in diesen Posts folgen.

Wenn Sie dies nicht möchten, beantworten Sie die nächste Frage „Sollten Suchmaschinen den Links zu diesem Beitrag folgen?“ mit „Nein“.

Rang Mathe

Wenn Sie Rank Math anstelle von Yoast SEO verwenden, ist es immer noch sehr einfach, eine oder mehrere Seiten Ihrer Website nicht zu indexieren.

Genau wie im Fall von Yoast SEO indiziert Rank Math Ihre Beiträge standardmäßig. Wenn Sie nicht möchten, dass ein bestimmter Beitrag oder eine bestimmte Seite indiziert wird, müssen Sie sie manuell auf „Kein Index“ setzen.

Gehen Sie zum „Erweiterten Modus“ und aktivieren Sie das Kontrollkästchen „Kein Index“, das sich im Abschnitt Robots Meta befindet.

Alternativ können Sie in der Admin-Menüleiste eine Seite auf noindex setzen. Gehen Sie zu Rank Math SEO > Diese Seite markieren > Als NoIndex, um dies mit nur einem Klick zu tun.

Rank Math hier kostenlos testen

AIOSEO

Wie zu erwarten, ist die Standardeinstellung in AIOSEO, alle Seiten und Beiträge zu indizieren.

Um bestimmte Seiten auszuschließen, müssen Sie dies für jeden Beitrag oder für ganze Kategorien manuell tun.

Scrollen Sie dazu nach unten zu den AIOSEO-Einstellungen und gehen Sie zur Registerkarte „Erweitert“. In der Kategorie “Robots Setting” sehen Sie die Einstellung “Use Default Settings” aktiviert.

Ändern Sie den Schalter auf off, um die Überschrift Robots Meta anzuzeigen. Aktivieren Sie das Kontrollkästchen Kein Index (und ggf. Kein Folgen) und klicken Sie dann auf „Aktualisieren“, um die neuen Einstellungen auf Ihren Beitrag anzuwenden.

Schützen Sie Ihre gesamte Site mit einem Passwort über cPanel

Die Verwendung eines Passworts zum Schutz Ihrer Site über cPanel ist eine weitere Möglichkeit, um zu verhindern, dass Suchmaschinen eine Site indizieren.

Um auf eine passwortgeschützte Site zuzugreifen und deren Inhalt anzuzeigen, müssen Benutzer einen Benutzernamen und ein Passwort eingeben.

Sie können Ihre gesamte Site über cPanel schützen, indem Sie sich bei Ihrem Hosting-Konto anmelden und zu „Passwortgeschützte Verzeichnisse“ navigieren. Die Position des Symbols kann von Host zu Host unterschiedlich sein, Sie finden es jedoch im Allgemeinen im Abschnitt „Sicherheit“.

Wählen Sie das Verzeichnis public_html oder den Ordner, in dem Sie WordPress installiert haben, wenn es sich um einen anderen handelt.

Sie müssen dann Berechtigungen für den Ordner festlegen und einen Benutzernamen und ein Kennwort erstellen.

Dadurch wird Ihre gesamte Site mit einem Kennwort geschützt. Das bedeutet, dass bei jedem Versuch einer Suchmaschine oder eines Benutzers, die Site zu besuchen, sie aufgefordert werden, den Benutzernamen und das Kennwort einzugeben.

Schützen Sie Ihre WordPress-Site mit einem Plugin mit einem Passwort

Wenn Sie über Ihr Hosting keinen Zugriff auf cPanel haben oder diesen Weg nicht gehen möchten, können Sie ein Plugin verwenden, um Ihre Site mit einem Passwort zu schützen.

Einige beliebte Plugins für den Passwortschutz sind:

Passwortgeschützt

Dieses Plugin ist eine der einfachsten Möglichkeiten, Ihre Site mit einem Passwort zu schützen. Sie müssen nur ein Kontrollkästchen aktivieren, um den Schutz zu aktivieren, und Sie müssen keinen Benutzernamen erstellen.

Eine der besten Eigenschaften des passwortgeschützten Plugins ist, dass es die Möglichkeit bietet, IP-Adressen sowie verschiedene Arten von Anfragen auf die Whitelist zu setzen.

Sie können diese Optionen ganz einfach konfigurieren, indem Sie nach der Installation und Aktivierung des Plugins zu Einstellungen → Passwortgeschützt gehen.

SeedProd

SeedProd ist ein weiteres Plugin, mit dem Sie Ihre WordPress-Site mit einem Passwort schützen können.

Indem Sie einen Benutzernamen und ein Passwort in SeedProd hinzufügen, können Sie Ihre Website vor Benutzern und Suchmaschinen gleichermaßen verbergen.

Passster

Mit Passster können Sie Ihre gesamte Site oder bestimmte Seiten oder Beiträge mit einem Kennwort schützen. Neben der Einschränkung von Inhalten mit einem Passwort können Sie mit diesem Plugin die Überschrift anpassen und den Inhalt mit einem Captcha einschränken.

Andere Optionen umfassen mehrere Passwörter zum Schutz Ihrer Inhalte und das Entsperren geschützter Bereiche der Website über einen Link.

Fazit

Wie Sie sehen, stehen Ihnen mehrere Optionen zur Verfügung, wenn Sie verhindern möchten, dass Suchmaschinen eine Seite indizieren.

Unabhängig davon, ob Sie ein „noindex“-Metatag hinzufügen oder ein Plugin verwenden, um Ihre gesamte Site mit einem Passwort zu schützen, es ist ganz einfach zu verhindern, dass Suchmaschinen eine oder mehrere Ihrer Seiten indizieren.

Hoffentlich hat es unser Leitfaden einfacher gemacht, die beste Option für Ihre spezielle Website und Ihren Inhaltstyp auszuwählen.

Leave a Reply

Your email address will not be published. Required fields are marked *

Get Free Gift !

Subscribe to our mailing list and get interesting stuff and updates to your email inbox.

Thank you for subscribing.

Something went wrong.