Google-Extended
Identificador de controlo em robots.txt que permite aos editores decidir se a Google pode usar conteúdos rastreados para treinar e fundamentar os seus modelos de IA Gemini.
O que é Google-Extended?
Google-Extended é um identificador de controlo da Google em robots.txt que permite decidir se os conteúdos podem ser usados para treinar e fundamentar modelos de IA generativa, incluindo Gemini. Não é um crawler separado: o Googlebot continua a rastrear, e Google-Extended controla a utilização possível dos conteúdos recolhidos. Os proprietários dos sites podem bloqueá-lo em robots.txt sem afetar as classificações de SEO tradicionais. Assim, os editores podem permitir a indexação no Google Search e bloquear o treino de IA, ou permitir ambos para máxima visibilidade.
Como o Qwairy transforma isto em ação
A Qwairy verifica se robots.txt permite Google-Extended como parte da análise de acessibilidade para crawlers. Veja rapidamente se os conteúdos podem ser usados para treinar e fundamentar os modelos Gemini da Google, juntamente com as restantes diretivas para crawlers de IA.
Perguntas frequentes
Termos relacionados
Crawler de IA
Cliente Web automatizado operado por uma empresa de IA para treino de modelos, pesquisa com IA ou recuperação de informação a pedido do utilizador.
robots.txt
Ficheiro de texto na raiz de um site que indica aos robôs de indexação que páginas devem explorar ou evitar.
Gemini
Família de modelos de linguagem desenvolvida pela Google e integrada nos seus produtos de pesquisa e IA.
Família de modelos de linguagem desenvolvida pela Google e integrada nos seus produtos de pesquisa e IA.
Crawler Web da OpenAI para conteúdos que podem ser usados no treino de modelos de IA generativa, distinto do crawler de pesquisa OAI-SearchBot.