O Google anunciou um novo relatório robots.txt no Google Search Console e, ao mesmo tempo, disse que encerrará a antiga ferramenta de teste de robots.txt. A nova ferramenta mostra quais arquivos robots.txt o Google encontrou para os 20 principais hosts do seu site, a última vez que eles foram rastreados e quaisquer avisos ou erros encontrados.
O Google também disse em X“Também estamos disponibilizando informações relevantes no relatório de indexação de páginas. Como parte desta atualização, estamos desativando o testador robots.txt.”
Para acessá-lo, acesse o link de configurações do seu perfil do Search Console ou clique aqui. Isto é o que parece:
Esta é a aparência do relatório deste site, sim, tenho um erro crítico. Aqui estão esses detalhes e observe que você pode solicitar o novo rastreamento do seu arquivo robots.txt:
Este documento de ajuda aborda muito mais sobre este relatório.
Alguns não estão felizes com o desaparecimento da ferramenta de teste robots.txt, mas o Bing ainda tem uma:
Boas alternativas à ferramenta depreciada do Google para validar seu robots.txt:
• Merkle: https://t.co/33yMW9IlPB
• Ryte: https://t.co/jYAGuHN2q5
• Screaming Frog (rastreamento): https://t.co/zsr2KMiNmC– Cyrus SEO (@CyrusShepard) 15 de novembro de 2023
Adoro os novos relatórios do robots.txt (está nas configurações, aliás), mas remover o testador do robots.txt? Adoro essa ferramenta e pode ser muito útil. Existem outras ferramentas que fazem coisas semelhantes, incluindo uma do Bing, mas adoraria ver isso no GSC. 🙂 https://t.co/hMIJQjfpQV
-Glenn Gabe (@glenngabe) 15 de novembro de 2023
Discussão no fórum em X.
