Google-Extended vs. Googlebot: Was jeder steuert
Das Blockieren des falschen Google-Tokens ist einer der häufigsten Fehler bei KI-gestützter Suchmaschinenoptimierung. Das eine Token steuert Gemini, das andere die Google-Suche und ihre KI-Funktionen.
Was Sie lernen werden
- Was Googlebot und Google-Extended tatsächlich tun
- Warum Google-Extended Sie nicht aus AI Overviews entfernt
- Welche Einstellungen beeinflussen tatsächlich AI Overviews und AI Mode
- Sichere robots.txt Beispiele für gängige Ziele
Google verwendet einen Crawler für die Suche und ein separates Kontrolltoken für seine KI-Modelle. Eine Vermischung dieser Systeme kann dazu führen, dass Sie entweder aus der Google-Suche entfernt werden oder genau dort landen, wo Sie nicht sein wollten.
Zwei verschiedene Dinge
| Name | Was es ist | Was es kontrolliert |
|---|---|---|
Googlebot |
Der Crawler, der Seiten abruft | Google-Suche, einschließlich AI Overviews und AI Mode |
Google-Extended |
Ein robots.txt-Token, kein separater Crawler | Ob von Google gecrawlte Inhalte zum Trainieren Gemini -Modellen und zur Begründung Gemini -Antworten verwendet werden können |
Google-Extended besucht Ihre Website niemals von selbst. Das Crawling übernimmt der Googlebot, und das Token teilt Google lediglich mit, wie die Googlebot bereits erfassten Daten verwendet werden dürfen.
Was bewirkt das Blockieren jedes einzelnen?
- Das Blockieren
Googlebotentfernt Seiten aus der Google-Suche. Sie verschwinden aus den regulären Suchergebnissen sowie aus AI Overviews und AI Mode, da diese Funktionen auf dem Suchindex basieren. - Durch das Blockieren
Google-Extendedwird verhindert, dass Ihre Inhalte in Gemini -Schulungen und Gemini angezeigt werden. Ihre Suchmaschinenplatzierungen und Ihre Präsenz in AI Overviews bleiben unverändert.
Der zweite Punkt überrascht viele Website-Betreiber: Google-Extended ist keine Option zum Deaktivieren AI Overviews.
Was steuert AI Overviews und AI Mode
nosnippetundmax-snippetbeschränken den Text, den Google anzeigen kann, auch in KI-Funktionen.data-nosnippetfür ein Element verhindert, dass dieser Teil einer Seite in Snippets und KI-Antworten berücksichtigt wird.- Seit Juni 2026 bietet Search Console eine Einstellung, mit der eine Website vollständig von Googles generativen KI-Funktionen ausgeschlossen werden kann. Es gilt das Alles-oder-Nichts-Prinzip: Seiten, die auf diese Weise ausgeschlossen werden, erhalten weder Impressionen noch Klicks durch diese Funktionen.
robots.txt-Beispiele
Die Such- und KI-Funktionen bleiben aktiviert, Gemini -Training abwählen:
User-agent: Google-Extended
Disallow: /
User-agent: *
Allow: /Halten Sie einen privaten Bereich von allem fern, was Google tut:
User-agent: Googlebot
Disallow: /private/Blockieren Sie Googlebot niemals für die gesamte Website, es sei denn, Sie möchten die Google-Suche wirklich verlassen.
Überprüfen Sie Ihre Konfiguration
Der KI-Crawler-Prüfer zeigt an, wie Ihre robots.txt Googlebot, Google-Extended und 20 weitere KI-Bots behandelt, und der KI-robots.txt-Generator erstellt die Regeln aus Kontrollkästchen.