Duplicate Content: erkennen, bewerten, beheben
Duplicate Content ist selten ein Strafproblem und fast immer ein Effizienzproblem. Wenn derselbe Inhalt unter mehreren URLs erreichbar ist, muss Google entscheiden, welche Version in den Index kommt – und diese Entscheidung fällt nicht immer so aus, wie du es möchtest. Dieser Leitfaden zeigt, wie Duplikate entstehen, wie Google sie behandelt, welches Werkzeug in welchem Fall das richtige ist und wie du Duplikate systematisch findest.
1. Was ist Duplicate Content?
Duplicate Content bezeichnet Inhalte, die unter mehr als einer URL identisch oder sehr ähnlich abrufbar sind. Google unterscheidet dabei nicht zwischen Absicht und Versehen, sondern nur zwischen drei Fällen:
- Exakte Duplikate: Byte-identischer Hauptinhalt, etwa
example.com/schuheundexample.com/schuhe?utm_source=newsletter. - Near-Duplicates: Der Hauptinhalt ist zu großen Teilen gleich und unterscheidet sich nur in wenigen Wörtern – typisch für Produktvarianten und Standortseiten.
- Externe Duplikate: Derselbe Text auf mehreren Domains, etwa durch Syndication, Herstellerbeschreibungen oder Scraping.
Wichtig für die Einordnung: Gemeinsame Kopf-, Fuß- und Navigationsbereiche sind kein Duplicate Content. Google erkennt diese Boilerplate-Elemente und bewertet den Hauptinhalt separat.
2. Der Mythos der Duplicate-Content-Strafe
Es gibt keine „Duplicate-Content-Penalty" für normale, unabsichtliche Duplikate. Google beschreibt das Vorgehen selbst als Konsolidierung: Duplikate werden zu einem Cluster zusammengefasst, eine Version wird als kanonisch gewählt, die anderen erscheinen nicht separat in den Ergebnissen.
Eine manuelle Maßnahme droht nur bei einem klar manipulativen Muster: Inhalte, die ausschließlich kopiert wurden, um Suchergebnisse zu belegen – also Scraping ohne eigenen Mehrwert oder große Mengen automatisch erzeugter Doorway-Seiten. Das fällt unter Spam-Richtlinien, nicht unter Duplicate Content im technischen Sinn.
Die richtige Sorge: Nicht „werde ich abgestraft", sondern „welche meiner Varianten landet im Index, wie viel Crawl-Budget kosten mich die anderen, und verteilt sich meine Link Equity auf mehrere URLs statt sich zu bündeln".
3. Welche Auswirkungen Duplikate tatsächlich haben
- Falsche URL im Index: Google wählt eine Variante, die du nicht wolltest – etwa die Filter-URL statt der Kategorieseite. Deine Snippets, Rankings und internen Links passen dann nicht zur indexierten Version.
- Verteilte Link Equity: Zeigen externe Links auf vier Varianten, verteilt sich die Wirkung, bis Google die Signale konsolidiert – was nicht garantiert und nicht sofort passiert.
- Verschwendetes Crawl-Budget: Jede Variante wird abgerufen. Bei Shops mit Facettennavigation ist das der Hauptkostenfaktor.
- Gesenkte Indexierungsquote: Ein hoher Anteil dünner Duplikate senkt den geschätzten Wert des gesamten URL-Inventars und damit die Wahrscheinlichkeit, dass neue Seiten indexiert werden.
- Instabile Snippets: Wechselt Google zwischen Varianten, ändern sich Titel und Description in den Ergebnissen – und die Klickrate schwankt.
4. Die zwölf häufigsten technischen Ursachen
Fast alle internen Duplikate entstehen aus einer dieser Quellen:
| Ursache | Beispiel | Lösung |
|---|---|---|
| Protokoll | http:// und https:// |
301 auf HTTPS, HSTS |
| Hostvariante | www. und ohne www. |
301 auf die kanonische Hostform |
| Trailing Slash | /schuhe und /schuhe/ |
Serverseitig eine Form erzwingen |
| Indexdatei | / und /index.html |
301 auf die kurze Form |
| Groß-/Kleinschreibung | /Schuhe und /schuhe |
Kleinschreibung erzwingen |
| Tracking-Parameter | ?utm_source=, ?gclid= |
Self-Canonical auf die saubere URL |
| Sortier- und Ansichtsparameter | ?sort=preis, ?view=grid |
Canonical plus robots.txt-Sperre |
| Session-IDs | ?sid=abc123 |
Cookies statt URL-Parameter |
| Facettenkombinationen | ?farbe=rot&groesse=42 |
Indexierungsregeln pro Filtertyp |
| Mehrfachpfade | Produkt in drei Kategorien | Eine kanonische Produkt-URL |
| Druck- und Exportansichten | /artikel?print=1 |
noindex oder Canonical |
| Test- und Staging-Umgebungen | staging.example.com |
HTTP-Authentifizierung, nicht nur robots.txt |
Der Grundsatz dahinter: Jede dieser Ursachen erzeugt eine URL, die aus Nutzersicht identisch ist. Details zur URL-Normalisierung im Leitfaden URLs & Statuscodes.
5. Near-Duplicates: das unterschätzte Problem
Exakte Duplikate sind leicht zu finden. Deutlich häufiger und schwerer greifbar sind Seiten, die sich nur minimal unterscheiden:
- Produktvarianten: Dasselbe Shirt in acht Farben mit identischem Beschreibungstext, jede Variante mit eigener URL.
- Standortseiten: „Klempner in Oldenburg", „Klempner in Bremen" – identischer Text, ausgetauschter Ortsname.
- Herstellerbeschreibungen: Derselbe Text wie bei 200 anderen Händlern.
- Tag- und Kategoriearchive: Übersichten, die dieselben drei Beiträge in anderer Reihenfolge listen.
- Dünne Programmatic-Seiten: Aus einer Datenbank generierte Kombinationsseiten mit austauschbarem Text.
Ein brauchbarer Schwellenwert aus der Praxis: Liegt die inhaltliche Ähnlichkeit des Hauptinhalts über 90 %, behandelt Google die Seiten sehr wahrscheinlich als Duplikate. Zwischen 70 und 90 % ist es eine Einzelfallentscheidung, die von der Nachfrage nach den jeweiligen Varianten abhängt.
Wichtige Unterscheidung: Bei Near-Duplicates ist „zusammenlegen" nicht automatisch richtig. Wenn es für „Shirt rot" und „Shirt blau" jeweils echtes Suchvolumen gibt, ist die Antwort Differenzierung durch eigene Inhalte – nicht Konsolidierung. Erst die Nachfrage prüfen, dann entscheiden.
6. Wie Google Duplikate erkennt und konsolidiert
Der Prozess läuft in drei Schritten:
- Reduktion auf Prüfsummen: Google berechnet Fingerprints des Hauptinhalts, nachdem Boilerplate herausgerechnet wurde.
- Clustering: URLs mit gleichem oder sehr nahem Fingerprint landen in einem Cluster.
- Kanonische Auswahl: Aus dem Cluster wird eine Version für den Index gewählt. Die Signale in absteigender Wirkung:
- Weiterleitungen (
301ist das stärkste Signal) - Interne Verlinkung – welche Variante verlinkst du selbst?
rel="canonical"als Hinweis- Eintrag in der XML-Sitemap
- Externe Links auf die Varianten
hreflang-Verweise- HTTPS gegenüber HTTP, kürzere und sauberere URL als Tiebreaker
Widersprechen sich diese Signale, entscheidet Google nach der Mehrheit – und ignoriert dabei gegebenenfalls dein Canonical. Genau das steht im Seitenindexierungsbericht als „Duplikat – Google hat eine andere Seite als der Nutzer als kanonische Seite bestimmt". Mehr dazu im Leitfaden zur Indexierung.
7. Das richtige Werkzeug für den jeweiligen Fall
Fünf Instrumente, klar getrennte Zuständigkeiten:
| Situation | Richtiges Mittel | Warum |
|---|---|---|
| Alte URL soll dauerhaft verschwinden | 301-Weiterleitung |
Stärkstes Konsolidierungssignal, spart langfristig Crawls |
| Beide URLs müssen erreichbar bleiben | rel="canonical" |
Bündelt Signale, ohne die Nutzung einzuschränken |
| Seite ist für Nutzer nötig, für die Suche wertlos | noindex |
Hält die Seite nutzbar und aus dem Index heraus |
| Unendliche URL-Varianten ohne eigenen Inhalt | robots.txt-Sperre | Verhindert das Crawling überhaupt |
| Gleiche Sprache, verschiedene Länder | hreflang plus Self-Canonical |
Beide Versionen sollen indexiert bleiben |
Nicht kombinieren: noindex und ein Canonical auf eine andere URL sind
widersprüchliche Signale – das eine sagt „entfernen", das andere „Signale weitergeben". Ebenso
falsch: eine per robots.txt gesperrte URL mit Canonical versehen. Google kann den Canonical dann nicht
lesen.
8. Duplikate systematisch finden
Interne Duplikate
- Search Console: Im Seitenindexierungsbericht die drei Duplikat-Status filtern und nach URL-Muster gruppieren. Das zeigt Systemfehler statt Einzelfälle.
- Crawler mit Ähnlichkeitsanalyse: Werkzeuge wie Screaming Frog oder Sitebulb berechnen eine Near-Duplicate-Quote. Schwelle bei 90 % ansetzen, dann schrittweise senken.
- Manueller Varianten-Test: Rufe für eine beliebige Seite alle Varianten auf und prüfe den Statuscode:
# Alle Varianten muessen auf eine kanonische Form fuehren
curl -I http://example.com/schuhe
curl -I https://www.example.com/schuhe
curl -I https://example.com/schuhe/
curl -I https://example.com/Schuhe
curl -I https://example.com/index.html
curl -I "https://example.com/schuhe?utm_source=test"Erwartung: Genau eine Variante antwortet mit 200, alle anderen mit 301 auf diese
– oder sie liefern 200 mit einem Canonical auf die kanonische Form.
Externe Duplikate
- Einen charakteristischen Satz von 8 bis 12 Wörtern in Anführungszeichen googeln.
- Prüfen, ob deine Domain für den eigenen Text an erster Stelle steht.
- Bei Herstellerbeschreibungen: eigene Textbausteine ergänzen, bis der Anteil des Fremdtexts unter etwa die Hälfte fällt.
9. Sonderfälle richtig lösen
Paginierung
Seite 2 einer Serie ist kein Duplikat von Seite 1. Setze auf jeder paginierten Seite einen
selbstreferenzierenden Canonical. Ein Canonical von /blog?seite=2 auf
/blog führt dazu, dass Google die tieferen Seiten seltener crawlt und die dort verlinkten
Inhalte schlechter findet. rel="prev" und rel="next" wertet Google seit 2019
nicht mehr aus – normale Links genügen.
Facettennavigation
Pro Filtertyp entscheiden: nachfragestarke Einzelfacetten indexierbar machen, Kombinationen per Canonical
oder noindex konsolidieren, Sortierung und Ansicht per robots.txt sperren. Das
URL-Parameter-Tool der Search Console wurde 2022 abgeschaltet – die Steuerung läuft heute
vollständig über robots.txt, Canonical und interne Verlinkung.
Produktvarianten
Zwei saubere Muster: eine Produktseite mit Auswahl per Dropdown (eine URL, ein Canonical), oder eigene URLs pro Variante mit jeweils eigenem Beschreibungstext und Self-Canonical. Der Mischweg – eigene URLs mit identischem Text – erzeugt genau die Near-Duplicates, die Google zusammenfasst.
Syndication
Wenn du Inhalte an Partner weitergibst, ist die zuverlässigste Lösung ein noindex bei der
Kopie. Ein domainübergreifender Canonical auf das Original ist ein Hinweis, dem Google folgen
kann, aber nicht muss. Ein sichtbarer Quellenlink hilft zusätzlich, ersetzt aber keine
Direktive.
Sprach- und Länderversionen
Deutschsprachige Seiten für Deutschland, Österreich und die Schweiz sind kein zu behebendes Duplikat.
Jede Version erhält einen Self-Canonical und wechselseitige
hreflang-Verweise. Ein Canonical von der
österreichischen auf die deutsche Version nimmt die AT-Version aus dem Index.
10. Duplikate und KI-gestützte Suche
In KI-Antworten und generativen Suchsystemen verschärft sich das Problem: Diese Systeme zitieren in der Regel eine Quelle pro Aussage. Wer denselben Text wie 200 Wettbewerber verwendet, hat keinen Grund, als diese eine Quelle ausgewählt zu werden.
Was hier hilft, ist derselbe Hebel wie bei klassischen Near-Duplicates, nur mit mehr Nachdruck: eigene Daten, eigene Messwerte, eigene Erfahrungen, klar zugeordnete Autorenschaft und eindeutige Entitäten. Ergänzend sorgen strukturierte Daten dafür, dass die Zuordnung maschinenlesbar bleibt.
11. Checkliste für ein Duplicate-Content-Audit
- Alle Host- und Protokollvarianten testen: leitet alles auf eine kanonische Form?
- Trailing Slash, Groß-/Kleinschreibung und
index.htmlprüfen. - Parameter-Inventar erstellen und je Parameter entscheiden: eigener Inhalt oder nicht?
- Selbstreferenzierende Canonicals auf allen indexierbaren Seiten sicherstellen.
- Widersprüche zwischen Canonical, interner Verlinkung und Sitemap auflösen.
- Seitenindexierungsbericht nach Duplikat-Status filtern und nach Muster gruppieren.
- Near-Duplicate-Analyse ab 90 % Ähnlichkeit durchführen.
- Bei Near-Duplicates Nachfrage prüfen: differenzieren oder zusammenlegen?
- Paginierte Seiten auf Self-Canonical umstellen.
- Test- und Staging-Umgebungen per Authentifizierung schließen.
- Druck-, Export- und AMP-Varianten prüfen.
- Externe Duplikate über Phrasensuche kontrollieren.
- Nach vier Wochen die Statusverteilung im Indexierungsbericht erneut messen.
Profi-Tipp: Mit Rank-O-Saur siehst du direkt beim Aufruf einer URL, ob der Canonical selbstreferenzierend ist oder woanders hinzeigt, und wie die Robots-Direktiven dazu passen. Damit prüfst du Varianten-URLs in Sekunden, statt den Quelltext zu durchsuchen.
12. Häufig gestellte Fragen
Bestraft Google Duplicate Content?
Nein, für normale technische Duplikate gibt es keine Strafe. Google fasst Duplikate zu einem Cluster zusammen und wählt eine kanonische Version. Eine manuelle Maßnahme droht nur bei klar manipulativem Vorgehen wie Scraping ohne Mehrwert oder massenhaft erzeugten Doorway-Seiten.
Ab welcher Ähnlichkeit gilt Inhalt als Duplikat?
Es gibt keinen offiziellen Schwellenwert. In der Praxis werden Seiten ab etwa 90 Prozent Ähnlichkeit im Hauptinhalt zuverlässig zusammengefasst. Zwischen 70 und 90 Prozent hängt es davon ab, ob es für die Varianten eigene Nachfrage gibt.
Sind identische Navigation und Footer Duplicate Content?
Nein. Google erkennt wiederkehrende Boilerplate-Elemente und bewertet den Hauptinhalt separat. Problematisch wird es erst, wenn der Hauptinhalt so kurz ist, dass die Seite überwiegend aus Boilerplate besteht.
Canonical oder 301 – was soll ich nehmen?
Wenn beide URLs erreichbar bleiben müssen, etwa bei Tracking-Parametern, nimm den Canonical. Wenn die alte URL dauerhaft verschwinden soll, nimm die 301-Weiterleitung. Die Weiterleitung ist das stärkere Signal und spart langfristig Crawl-Budget.
Wie gehe ich mit identischen Herstellertexten um?
Ergänze eigene Inhalte, bis der übernommene Text nicht mehr den Großteil der Seite ausmacht: eigene Fotos, Maßangaben, Anwendungshinweise, Bewertungen, Vergleichstabellen. Reines Umschreiben des Herstellertexts bringt wenig, echter Zusatznutzen dagegen viel.
Muss ich paginierte Seiten auf Seite 1 kanonisieren?
Nein, das ist ein häufiger Fehler. Jede paginierte Seite braucht einen selbstreferenzierenden Canonical. Ein Canonical auf Seite 1 führt dazu, dass Google die tieferen Seiten seltener crawlt und die dort verlinkten Inhalte schlechter findet.
Sind deutschsprachige Seiten für DE, AT und CH ein Duplikat?
Technisch ja, praktisch ist es ein gelöster Fall: Jede Version erhält einen selbstreferenzierenden Canonical und wechselseitige hreflang-Verweise. Damit bleiben alle Versionen indexiert und Google spielt die passende Region aus.
Was ist aus dem URL-Parameter-Tool der Search Console geworden?
Google hat es 2022 abgeschaltet. Die Steuerung von Parameter-URLs läuft heute über robots.txt, selbstreferenzierende Canonicals, noindex und vor allem darüber, welche Varianten du intern überhaupt verlinkst.
Weiterlesen
