[{"data":1,"prerenderedAt":96},["ShallowReactive",2],{"tool-robots-txt-validator-pt":3},{"common":4,"copy":13},{"hubLink":5,"resultTitle":6,"fix":7,"fullTitle":8,"fullText":9,"fullCta":10,"faqTitle":11,"waiting":12},"Todas as ferramentas grátis","Resultados de {host}","Como corrigir","Veja como a IA lê este site","Faça uma análise completa e grátis de {host} para ver as duas pontuações de prontidão para IA e todas as correções.","Analisar este site","Perguntas","Testando {host}. Isso pode levar vários minutos, então mantenha esta página aberta.",{"name":14,"title":15,"description":16,"h1":17,"lede":18,"empty":19,"labels":20,"about":21,"faq":25,"robots":44},"Validador de robots.txt","Validador e testador de robots.txt: confira cada regra","Valide o robots.txt por URL ou colando. Ache erros de sintaxe e regras inúteis, teste URLs e veja quais crawlers de busca, IA e SEO ele bloqueia.","Validador e testador de robots.txt","Busque o robots.txt de um site ou cole o seu. Veja cada erro por linha, teste qualquer URL e confira quais crawlers conseguem entrar.","",{},[22,23,24],"O validador lê o robots.txt linha por linha, como o Google e outros crawlers fazem. Ele sinaliza linhas que os crawlers ignoram, regras que nunca coincidem, regras que escondem CSS e JavaScript do Google e linhas que o Google não suporta, como Noindex e Crawl-delay.","A falta de um robots.txt (HTTP 404) não é problema: os crawlers entendem isso como permissão para rastrear tudo. Um erro de servidor (HTTP 5xx) é pior. O Google o trata como “bloquear tudo” e para de rastrear até o arquivo voltar a carregar.","As linhas Content-Signal são válidas. Elas dizem como seu conteúdo pode ser usado em buscas, respostas de IA e treinamento de IA, então o validador só confere se os valores são yes ou no.",[26,29,32,35,38,41],{"q":27,"a":28},"Como testo meu robots.txt?","Informe seu domínio ou cole o arquivo. Depois adicione caminhos em Testar URLs e escolha um crawler. Cada caminho mostra Permitido ou Bloqueado e a regra que decidiu.",{"q":30,"a":31},"O testador de robots.txt do Google acabou. O que posso usar?","O Google aposentou o testador no Search Console em 2023. O relatório de robots.txt só mostra os arquivos que o Google buscou. Esta página testa suas regras com qualquer caminho e crawler, como o testador antigo fazia.",{"q":33,"a":34},"Quando Allow e Disallow coincidem, qual vence?","Vence a regra com o caminho mais longo. Se tiverem o mesmo tamanho, Allow vence. Assim, Disallow: \u002Fblog com Allow: \u002Fblog\u002Fpublic deixa os crawlers entrarem em \u002Fblog\u002Fpublic e os mantém fora do resto de \u002Fblog.",{"q":36,"a":37},"O Disallow mantém uma página fora do Google?","Não. Disallow impede o rastreamento, não a indexação. O Google ainda pode listar uma URL bloqueada se outras páginas apontarem para ela. Para manter uma página fora, permita o rastreamento e adicione uma metatag noindex ou o cabeçalho X-Robots-Tag.",{"q":39,"a":40},"Como bloqueio crawlers de IA?","Dê a cada crawler seu próprio grupo, por exemplo User-agent: GPTBot seguido de Disallow: \u002F. Crawlers de treinamento e de busca com IA são bots diferentes, então bloqueie só os que você quer. A cobertura de crawlers mostra o resultado de cada um.",{"q":42,"a":43},"Um erro de servidor no robots.txt é pior que um 404?","Sim. Um 404 significa que não há regras, então os crawlers podem rastrear tudo. Um 5xx significa que o arquivo não pôde ser lido, e o Google trata o site inteiro como bloqueado. Corrija primeiro os erros de servidor no robots.txt.",{"modeLegend":45,"modeFetch":46,"modePaste":47,"domainLabel":48,"domainPlaceholder":49,"fetch":50,"fetching":51,"pasteLabel":52,"pastePlaceholder":53,"pasteHint":54,"resultTitle":55,"empty":56,"pasted":57,"lines":58,"verdict":59,"counts":63,"severity":68,"line":72,"file":73,"noIssues":74,"sitemapsTitle":67,"testTitle":75,"testLabel":76,"crawlerLabel":77,"allCrawlers":78,"allowed":79,"blocked":80,"byRule":81,"noRule":82,"coverageTitle":83,"coverageFor":84,"groups":85,"blockedCount":89,"serverError":90,"html":91,"missing":92,"unread":93,"blockedTld":94,"fullScan":95},"Entrada","Buscar por URL","Colar robots.txt","Domínio","example.com","Validar","Buscando...","Conteúdo do robots.txt","User-agent: *\nDisallow: \u002Fadmin\nSitemap: https:\u002F\u002Fexample.com\u002Fsitemap.xml","Verificado no seu navegador enquanto você digita. Nada é enviado ao SagBot.","Resultados","Busque um robots.txt ou cole um para ver os problemas e quais crawlers ele deixa entrar.","Texto colado","Linhas: {n}",{"errors":60,"warnings":61,"valid":62},"Erros encontrados","Válido, com avisos para revisar","Válido",{"errors":64,"warnings":65,"groups":66,"sitemaps":67},"Erros","Avisos","Grupos de regras","Sitemaps",{"error":69,"warning":70,"note":71},"Erro","Aviso","Observação","Linha {n}","Arquivo inteiro","Nenhum problema encontrado.","Testar URLs","Caminhos ou URLs, um por linha","Crawler","Todos os crawlers (*)","Permitido","Bloqueado","{rule} (linha {line})","Nenhuma regra coincidiu","Cobertura de crawlers","Verificado em {path}",{"search":86,"ai":87,"seo":88},"Crawlers de busca","Crawlers de IA","Crawlers de SEO","{n} de {total} bloqueados","O servidor respondeu HTTP {status}. Os crawlers tratam isso como “bloquear tudo” até o robots.txt voltar a carregar.","O robots.txt retorna uma página HTML, não um arquivo de texto. Os crawlers não encontram regras nela.","Não há robots.txt (HTTP {status}). O site não define regras, então todos os crawlers podem rastrear tudo.","Não foi possível ler o robots.txt: {reason}","O SagBot não verifica domínios deste TLD. Você ainda pode colar o arquivo.","Executar uma varredura completa de {host}",1794386919575]