ClaudeBot
Crawler Web da Anthropic que recolhe conteúdos públicos para treinar e melhorar os modelos Claude; os proprietários dos sites controlam o seu acesso por robots.txt.
O que é ClaudeBot?
O ClaudeBot é o crawler Web da Anthropic, identificado pelo agente de utilizador «ClaudeBot». Recolhe dados para treinar e melhorar os modelos Claude. Tal como com o GPTBot, pode controlar o seu acesso através de robots.txt. Permitir o ClaudeBot possibilita que os seus conteúdos sejam considerados no ecossistema Claude.
Como o Qwairy transforma isto em ação
A Qwairy classifica pedidos observados do ClaudeBot nos registos de servidor ligados. Monitorize a frequência registada dos pedidos, os grupos de páginas solicitados, as respostas HTTP e a cobertura, sem tratar um pedido como prova de indexação ou prioridade.
Perguntas frequentes
Termos relacionados
Crawler de IA
Cliente Web automatizado operado por uma empresa de IA para treino de modelos, pesquisa com IA ou recuperação de informação a pedido do utilizador.
Claude
Modelo de linguagem desenvolvido pela Anthropic, concebido para ser útil, seguro e honesto.
robots.txt
Ficheiro de texto na raiz de um site que indica aos robôs de indexação que páginas devem explorar ou evitar.