Recentemente, o Google atualizou seu guia de spam com uma nova seção intitulada “Indexar apenas conteúdo destinado à pesquisa”. Esta adição, feita em 26 de outubro, orienta os sites que hospedam páginas criadas para compartilhamento direto, colaboração ou utilidade a implementar uma tag “noindex” ou utilizar uma diretiva no arquivo robots.txt para bloquear os crawlers por padrão. Essa mudança reflete a crescente preocupação da empresa em garantir que conteúdo indesejado não polua os resultados de busca.
O que foi adicionado
A nova seção destaca que plataformas que permitem que os usuários criem páginas compartilháveis ou ferramentas interativas devem avaliar se esse conteúdo foi realmente projetado para ser encontrado por meio de motores de busca ou se é destinado apenas a usuários que possuem o link. O texto específico sugere:
“Quando páginas são criadas para compartilhamento direto, colaboração ou utilidade, em vez de descoberta pública pela pesquisa, aplique a regra noindex (usando uma meta tag robots ou o cabeçalho HTTP X-Robots-Tag) ou bloqueie a indexação no robots.txt por padrão.”
Regras do noindex e robots.txt
O uso do robots.txt pode ser enganador; uma página bloqueada por essa diretiva ainda pode ser indexada se for linkada de outros sites. Seria possível que a URL e, possivelmente, o texto âncora dos links que apontam para ela apareçam nos resultados de pesquisa, mesmo sem uma descrição. Por outro lado, a regra noindex só funciona se robots.txt não estiver bloqueando a página, pois nesse caso o crawler nunca verá a instrução de noindex.
Novas verificações no Search Console
O guia atualizado também recomenda que os proprietários de sites verifiquem suas páginas pelo Search Console. Isso permite que as plataformas receba notificações em caso de ações manuais ou problemas de segurança. Além disso, é sugerido o monitoramento do relatório de Indexação de Páginas e do desempenho de pesquisa continuamente, para identificar picos inesperados de páginas indexadas.
Importância da atualização
A atualização do guia de spam do Google visa ajudar as plataformas a manterem páginas criadas por usuários que não são destinadas à pesquisa fora do índice e detectar spam de forma mais ágil. Portanto, é crucial que as empresas que utilizam conteúdo gerado por usuários revisitem suas práticas de indexação para garantir que estão cumprindo essas novas diretrizes e, assim, evitar problemas de visibilidade nos motores de busca.
Orientações para o futuro
O relatório de Indexação de Páginas agora inclui um status chamado “Indexado, embora bloqueado pelo robots.txt”, que indica que uma página foi indexada mesmo estando bloqueada. O Google recomenda a remoção do bloqueio e a utilização do noindex para garantir que o conteúdo inadequado não apareça nos resultados de busca.
