Google-Extended
Kontrollkennung in robots.txt, mit der Publisher festlegen, ob Google gecrawlte Inhalte zum Training und zur Fundierung seiner Gemini-KI-Modelle verwenden darf.
Was ist Google-Extended?
Google-Extended ist eine Kontrollkennung von Google in robots.txt. Damit steuern Sie, ob Ihre Inhalte zum Training und zur Fundierung generativer KI-Modelle wie Gemini genutzt werden dürfen. Es ist kein eigenständiger Crawler: Googlebot ruft die Inhalte weiterhin ab, Google-Extended regelt ihre mögliche Nutzung. Websitebetreiber können Google-Extended in robots.txt sperren, ohne klassische SEO-Rankings zu beeinträchtigen. So können Publisher die Indexierung für Google Search erlauben und KI-Training sperren oder für maximale Sichtbarkeit beides zulassen.
So macht Qwairy das umsetzbar
Qwairy prüft im Rahmen der Crawlability-Analyse, ob Ihre robots.txt Google-Extended zulässt. Erkennen Sie neben den übrigen KI-Crawler-Regeln sofort, ob Ihre Inhalte für Training und Fundierung von Googles Gemini-Modellen genutzt werden dürfen.
Häufig gestellte Fragen
Verwandte Begriffe
KI-Crawler
Automatisierter Webclient eines KI-Unternehmens für Modelltraining, KI-Suche oder von Nutzern angeforderte Abrufe.
robots.txt
Textdatei im Stammverzeichnis einer Website, die Crawlern anzeigt, welche Seiten sie erkunden oder meiden sollen.
Gemini
Familie von Sprachmodellen von Google, die in dessen Such- und KI-Produkte eingebunden ist.
Umfassende Bewertung der Sichtbarkeit einer Website in der KI-Suche und ihrer Optimierungschancen.
Webcrawler von OpenAI für Inhalte, die möglicherweise zum Training generativer KI-Modelle genutzt werden; unabhängig vom Such-Crawler OAI-SearchBot.