Google impacta a otimização global de mecanismos de busca através da utilização de diversas ferramentas.

O Google interrompeu os raspadores da web que coletam informações dos resultados de pesquisa, levando a problemas em diversas ferramentas de rastreamento de classificação amplamente utilizadas, como a Semrush, que contam com a obtenção de dados atualizados das páginas de resultados de busca.

O que acontece caso os resultados de pesquisa do Google sejam totalmente impedidos? Alguns dados obtidos por ferramentas de rastreamento estão sendo ampliados por algoritmos provenientes de diversas fontes de informação. Talvez seja viável contornar o bloqueio atual ao extrapolar os dados de outras fontes.

Ferramentas de SEO que estão inacessíveis.

O impacto das ações do Google está afetando significativamente a precisão dos dados fornecidos pelas ferramentas de SEO. Muitas dessas ferramentas estão enfrentando dificuldades em obter informações completas que costumavam ser acessíveis por meio da extração de resultados dos mecanismos de busca do Google (SERPs).

@RyanJones, que administra diversas ferramentas, postou uma nova mensagem hoje:

Com certeza impactando minhas ferramentas também – já que dependemos de um provedor de dados externo e todos os principais foram impedidos de acesso ontem. Muitos ainda estão bloqueados.

@seovision fez observações em espanhol usando uma expressão coloquial para comparar o Google a um cão que guarda verduras que não vai comer, impedindo o jardineiro de tê-las e tornando o recurso inacessível para todos.

Desde o dia anterior, parece que foi implementado um novo método para impedir a coleta de dados automatizada nas páginas de resultados dos mecanismos de busca, com critérios mais severos. Está se tornando cada vez mais complicado realizar raspagens. Assim como o cão do jardineiro, não vou compartilhar nem permitir que você obtenha esses dados.

Semrush é possivelmente a ferramenta mais popular que não teve suas informações atualizadas, conforme comentários online. No entanto, um representante da Semrush entrou em contato para afirmar que não há nada de anormal ocorrendo e que não existem problemas generalizados.

Uma outra plataforma de SEO bastante utilizada, o SE Ranking, também está enfrentando problemas de perda de informações recentes.

LauraChiocciora compartilhou uma imagem de uma mensagem que recebeu da plataforma SE Ranking informando que o rastreamento de posição foi restabelecido, no entanto, os Recursos SERP ainda não estão disponíveis devido a problemas técnicos.

A informação integral exibida na imagem é:

O monitoramento de localizações está funcionando novamente, porém o monitoramento das características do SERP ainda não está operacional devido a questões técnicas. A equipe está empenhada em solucionar o problema e disponibilizar os dados o mais breve possível.

Google proíbe o uso de SERP Sucata.

As regras do Google proibiram a automação da verificação de classificação nos resultados de busca, porém, permitiram que diversas empresas coletassem informações de classificação em suas buscas e vendessem esses dados para monitoramento de palavras-chave e posicionamento.

Seguindo as orientações do Google:

O tráfego gerado por máquinas, conhecido como tráfego automatizado, consiste em enviar consultas automatizadas ao Google, como raspagem de resultados para verificar classificações ou outro tipo de acesso automatizado ao Google Search sem autorização explícita. Essas práticas consomem recursos e afetam nossa capacidade de atender melhor aos usuários. Tais ações violam as políticas de spam e os Termos de Serviço do Google.

Técnicas Black Hat associadas que podem resultar em uma campanha de SEO.

Impedir a ação de raspadores é desafiador.

Bloquear raspadores é uma tarefa desafiadora e que consome muitos recursos, pois eles podem contornar os bloqueios ao mudar seu endereço IP e agente de usuário. Uma alternativa é identificar e bloquear comportamentos específicos, como um grande número de solicitações de página, que podem levar a um bloqueio. No entanto, essa estratégia também pode exigir muitos recursos para manter o controle de todos os endereços IP bloqueados, que podem se acumular rapidamente em grandes quantidades.

Informes acerca das redes sociais.

Um membro do grupo do Facebook SEO Signals Lab divulgou que o Google estava agindo de forma rigorosa contra aqueles que fazem raspagem de conteúdo na web. Alguns usuários relataram que a ferramenta Scrape Owl não estava operando corretamente para eles, e outros mencionaram que os dados da Semrush estavam desatualizados.

Outra publicação, desta vez no LinkedIn, notou que várias ferramentas não estavam atualizando seu conteúdo, porém também destacou que o bloqueio não impactou todos os provedores de dados, mencionando que a Sistrix e o MonitorRank continuavam operando normalmente. Um representante da empresa HaloScan mencionou que realizaram ajustes para retomar a coleta de dados do Google, com sucesso, enquanto outra fonte indicou que a ferramenta MyRankingMetrics ainda está apresentando informações atualizadas.

Assim, as ações do Google atualmente não estão impactando todos os sistemas de coleta de dados. É possível que o Google esteja influenciando determinados métodos de coleta, analisando as respostas e aprimorando sua capacidade de impedir esses processos. Nas próximas semanas, poderemos descobrir se o Google está aprimorando sua capacidade de bloquear esses sistemas ou se está apenas focando nos mais proeminentes.

Outra publicação no LinkedIn forneceu informações sobre as possíveis consequências do bloqueio, sugerindo que isso poderia levar a um aumento nos custos e taxas para os usuários finais de ferramentas de SEO SaaS.

Natalia Witczyk compartilhou as seguintes informações através do LinkedIn.

Novidade: O Google está aumentando suas ações contra a prática de scraping, implementando medidas mais rigorosas, como bloqueio de IPs e CAPTCHAs. Isso está afetando ferramentas de SEO conhecidas como Semrush e SE Ranking.

Essa ação do Google está tornando a coleta de dados mais difícil e dispendiosa, o que pode resultar em aumento das tarifas de assinatura para os usuários.

Alguém está enfrentando questões relacionadas a dados em suas ferramentas de otimização de mecanismos de busca?

Atualização: A Ahrefs não menciona nenhum problema, por isso retirei o nome dela do início do texto, mas alguns usuários mencionaram atrasos nos dados. Parece que a Sistrix não foi impactada.

Ryan Jones publicou uma mensagem no Twitter.

O Google realizou uma atualização recentemente que impede a maioria dos programas de extração de dados e várias interfaces de programação de aplicativos (APIs).

Google, por favor, forneça-nos uma API que possamos pagar pelo acesso aos resultados de pesquisa, em vez de oferecermos pagamentos.

Não houve nenhum anúncio realizado através do Google.

Até o momento, o Google não fez nenhum comunicado oficial, porém a discussão online pode influenciar alguém na empresa a se pronunciar.

Ilustração principal fornecida por Shutterstock/Krakenimages.com.