Lexikoneintrag

Meta Robots Tag

Was ist der Meta Robots Tag?

Der Meta Robots Tag ist eine Anweisung im HTML-Code deiner Website, die Suchmaschinen wie Google, Bing und Co. sagt, wie sie mit einer bestimmten Seite umgehen sollen. Im Prinzip gibst du den Suchmaschinen „Regieanweisungen“ darüber, ob sie deine Seite indexieren, also in den Suchergebnissen anzeigen sollen, oder ob sie bestimmte Inhalte ignorieren sollen. Der Meta Robots Tag ist also eine Art unsichtbarer Regisseur, der hinter den Kulissen das Verhalten von Suchmaschinen steuert.

Warum ist der Meta Robots Tag wichtig?

Ohne klare Anweisungen durch den Meta Robots Tag machen Suchmaschinen, was sie wollen: Sie crawlen (durchsuchen) und indexieren deine Seite nach ihren eigenen Regeln. Das ist in vielen Fällen okay, aber es gibt Situationen, in denen du selbst die Kontrolle übernehmen möchtest. Zum Beispiel möchtest du vielleicht verhindern, dass Suchmaschinen bestimmte Seiten (wie Login-Seiten, interne Suchergebnisse oder „Danke“-Seiten nach einem Kauf) in den Suchergebnissen anzeigen. Mit dem Meta Robots Tag kannst du das steuern.

Die wichtigsten Meta Robots Anweisungen

Es gibt verschiedene Anweisungen, die du im Meta Robots Tag nutzen kannst, je nachdem, wie du möchtest, dass Suchmaschinen mit deiner Seite umgehen:

1. index / noindex

  • index: Die Seite soll von Suchmaschinen gecrawlt und indexiert werden. Standardmäßig gehen Suchmaschinen davon aus, dass jede Seite indexiert werden soll, wenn nichts anderes angegeben ist.
  • noindex: Die Seite soll nicht in den Suchergebnissen erscheinen. Das ist nützlich für Seiten, die zwar online zugänglich sein sollen, aber nicht in den Suchmaschinen auftauchen sollen, wie zum Beispiel Testseiten oder Seiten mit sensiblen Inhalten.

2. follow / nofollow

  • follow: Die Suchmaschine soll den Links auf der Seite folgen und die verlinkten Seiten ebenfalls crawlen und indexieren. Auch dies ist der Standard, wenn nichts anderes angegeben wird.
  • nofollow: Die Suchmaschine soll den Links auf der Seite nicht folgen. Das ist sinnvoll, wenn du verhindern willst, dass Links auf bestimmte externe oder interne Seiten „Link-Juice“ (SEO-Power) weitergeben.

3. noarchive

Mit dieser Anweisung verhinderst du, dass eine Suchmaschine eine zwischengespeicherte (gecachete) Version deiner Seite anzeigt. Manchmal speichert Google eine Kopie einer Seite und bietet Nutzern die Möglichkeit, eine „im Cache gespeicherte Version“ anzusehen. Mit noarchive kannst du das unterbinden.

4. nosnippet

Verhindert, dass die Suchmaschine einen Ausschnitt (Snippet) deiner Seite in den Suchergebnissen anzeigt. Normalerweise zeigt Google einen kleinen Textauszug aus der Meta-Beschreibung oder vom Seiteninhalt. Wenn du diese Anweisung setzt, wird nur der Titel deiner Seite in den Suchergebnissen angezeigt, ohne zusätzlichen Text.

5. noimageindex

Diese Anweisung verhindert, dass Bilder von deiner Seite in den Suchergebnissen der Bildersuche auftauchen. Das kann sinnvoll sein, wenn du keine Bilder in der Google Bildersuche gelistet haben möchtest, etwa aus rechtlichen oder Branding-Gründen.

6. nocache

Mit nocache stellst du sicher, dass Suchmaschinen keine zwischengespeicherte Kopie deiner Seite speichern. Es verhindert ähnlich wie noarchive, dass ein Nutzer auf eine ältere, gecachte Version deiner Seite zugreifen kann.

Wie sieht ein Meta Robots Tag aus?

Der Meta Robots Tag wird in den <head>-Bereich des HTML-Codes deiner Seite eingefügt. Hier ein Beispiel:

<meta name="robots" content="noindex, nofollow">

In diesem Fall weist du die Suchmaschinen an, die Seite nicht in den Suchergebnissen anzuzeigen (noindex) und den Links auf der Seite nicht zu folgen (nofollow). Du kannst diese Anweisungen beliebig kombinieren, je nachdem, was du erreichen möchtest.

Wann solltest du den Meta Robots Tag verwenden?

Der Meta Robots Tag ist besonders nützlich in folgenden Fällen:

  • Seiten mit sensiblen oder irrelevanten Inhalten: Login-Seiten, interne Suchergebnisse oder „Danke“-Seiten nach einem Kauf müssen nicht in den Suchergebnissen erscheinen. Mit noindex hältst du sie von den Suchmaschinen fern.
  • Vermeidung von Duplicate Content: Wenn du mehrere Seiten mit ähnlichen oder gleichen Inhalten hast, kannst du verhindern, dass Suchmaschinen alle Seiten indexieren und damit das Problem von Duplicate Content entsteht.
  • Kontrolle über Links: Mit nofollow kannst du gezielt steuern, welche Links von Suchmaschinen verfolgt werden sollen und welche nicht. Das kann wichtig sein, um gezielt SEO-Power zu verteilen oder weiterzuleiten.

Fazit: Unsichtbare Kontrolle für maximale Flexibilität

Der Meta Robots Tag gibt dir die Macht, genau zu bestimmen, wie Suchmaschinen mit deiner Website umgehen sollen. Indem du klare Anweisungen gibst, kannst du sicherstellen, dass nur relevante Seiten in den Suchergebnissen erscheinen und Links oder Inhalte entsprechend behandelt werden. Diese unsichtbare Kontrolle kann dein SEO optimieren, deine Seiten übersichtlich halten und dir die Flexibilität geben, Inhalte nach deinen Wünschen zu verwalten.

Autor
Florian Beqiri

Florian Beqiri ist Gründer der SEO-Agentur Proactive Media. 

Im Blog berichtet er über die neusten Tipps, Tricks & Trends zum Thema Suchmaschinenmarketing.

Social-Media

Wie stehen deine Chancen in den Suchmaschinen?

Lass uns das für dich kostenfrei herausfinden!