X, muito, Twitter.com, agora está bloqueando o Bing Search, especificamente o Bingbot, de rastrear e acessar teor postado no Twitter.com, na plataforma X. O Twitter adicionou especificamente ao seu registo robots.txt uma diretiva para impedir que o Bingbot rastreie o teor em sua plataforma.
Cá está uma conquista de tela de seu Arquivo robots.txt:
Acredito que isso foi desvelado primeiro por Mike Ginley, que postou isso no X“Bloquear o Bing no Twitter é uma jogada interessante…” Glenn Gabe vasculhou a risca do tempo, percebendo que esta foi uma mudança bastante recente do Bing:
Desde 1º de julho, o Bing não estava sendo impedido de rastrear. Em 1º de setembro, TODOS os bots não incluídos especificamente no registo estavam sendo bloqueados. E a partir de 17 de outubro, o Bing estava sendo especificamente bloqueado. Uma consulta ao site revela algumas coisas muito estranhas para o Twitter no Bing, por razões óbvias. https://t.co/hWjKgxM9q7
-Glenn Gabe (@glenngabe) 18 de outubro de 2023
Na verdade, um comando do site no Bing mostra exclusivamente 180.000 URLs do Twitter aparecendo:
Mas com o Google, um comando do site mostra 422 milhões de URLs.
Em julho, o Twitter bloqueou o Google, levando a uma grande queda na visibilidade do Twitter na Pesquisa Google. Poucos dias depois, o Twitter reverteu essa mudança.
Acho que o Twitter/X não quer tráfico do Bing Search? Quero proferir, se eles quiserem uma indexação mais eficiente, basta usar o IndexNow?
Discussão no fórum em X.