Posts Recentes:

Google adiciona nova documentação para rastreador misterioso


O Google atualizou a lista de seus rastreadores oficiais adicionando o nome e as informações de um rastreador relativamente desconhecido que os editores têm visto de vez em quando, mas nenhuma documentação existia anteriormente.

Embora o Google tenha adicionado documentação oficial para este rastreador, as informações fornecidas parecem encorajar mais esclarecimentos.

Rastreadores de casos especiais

O Google possui vários tipos de rastreadores (também conhecidos como bots e spiders).

As diferentes formas de rastreadores são:

  • Rastreadores comuns
    Esses bots são usados ​​principalmente para indexar diferentes tipos de conteúdo. Mas alguns rastreadores comuns também servem para ferramentas de teste de pesquisa, uso interno da equipe de produtos do Google e rastreamento relacionado à IA.
  • Buscadores acionados pelo usuário
    Esses são bots acionados pelos usuários. Isso inclui usos como busca de feeds ou verificação de site.
  • Rastreadores de casos especiais
    Eles são para casos especiais, como verificações de qualidade de páginas da web de anúncios para celular ou para mensagens de notificação push por meio de APIs do Google. Esses bots não obedecem às diretivas globais do agente do usuário no robots.txt que são sinalizadas com o asterisco

.

A nova documentação do rastreador é para o agente de usuário Google-Safety. O rastreador não é novo, mas a documentação é nova.

Rastreador de segurança do Google

A documentação no rastreador de casos especiais do Google-Safety é usada pelos processos do Google para encontrar malware.

Único entre os rastreadores de casos especiais, o rastreador de segurança do Google ignora completamente todas as diretivas do robots.txt.

A nova documentação do Google-Safety Crawler:

“O agente de usuário Google-Safety lida com rastreamento específico de abuso, como descoberta de malware para links postados publicamente nas propriedades do Google.

Este agente de usuário ignora as regras do robots.txt.”

"Google-Safety"

A string completa do agente para o rastreador:

Leia a nova documentação do agente de usuário Google-Safety na página Central da Pesquisa Google para rastreadores, na seção dedicada a rastreadores de casos especiais.

Visão geral dos rastreadores e buscadores do Google (agentes de usuário) – rastreadores de casos especiais

Últimas

Assine

spot_img

Veja Também

spot_img

Paul Graham afirma que Sam Altman não foi demitido da Y Combinator

Em um série de postagens no X na quinta-feira, Paul Graham, cofundador da aceleradora de startups Y Combinator, rejeitou as alegações de que...

O financiamento de startups de fabricação de IA está em declínio enquanto a EthonAI da Suíça arrecada US$ 16,5 milhões

À medida que as fábricas e instalações de produção se tornaram “mais esperto”através de sensores, robótica e outras tecnologias conectadas, isso criou um...