O Google admitiu que o Search Console pode exibir a mensagem de erro “couldn’t fetch” (não foi possível buscar) para um sitemap XML mesmo quando o arquivo está correto, acessível publicamente e devidamente vinculado ao robots.txt. A explicação veio de Martin Splitt e John Mueller, dois porta-vozes da empresa que atuam na equipe de busca, durante uma conversa sobre o tema.
O caso importa porque atinge diretamente quem cuida de sites e depende do Search Console para monitorar a indexação. Muitos profissionais recebem o aviso de erro sem conseguir identificar nenhum problema técnico real no sitemap, o que gera confusão na hora de diagnosticar falhas.
Por que o erro de sitemap aparece mesmo sem problema técnico?
Segundo Martin Splitt, é possível validar tecnicamente se um sitemap está correto, público e linkado no robots.txt. Ainda assim, o Search Console às vezes aponta que o Google não conseguiu buscá-lo.
Splitt reconheceu a frustração causada pela mensagem:
“Por que o Search Console às vezes mostra ‘couldn’t fetch’, mesmo que o XML do sitemap seja válido? Porque dá para validar isso, essa é a vantagem de um formato estruturado. Então o sitemap é válido, está acessível publicamente e está linkado no robots.txt. E, mesmo assim, o Search Console diz que não conseguiu buscar.”
Sobrecarga no servidor pode travar o acesso ao sitemap
John Mueller afirmou que essa dúvida aparece com frequência em fóruns e apontou dois motivos principais para o erro. O primeiro está ligado à capacidade do servidor.
Segundo Mueller, o Google pode simplesmente não ter tempo hábil para rastrear o sitemap se o servidor estiver sobrecarregado de requisições ou se o limite de rastreamento do site já tiver sido usado em outras páginas.
Mueller explicou o raciocínio:
“Já falamos sobre isso antes, sobre quanto os sistemas do Google conseguem rastrear de um site. E pode acontecer de não termos tempo para rastrear esse arquivo de sitemap porque estamos ocupados com outras coisas. Isso pode acontecer. Nesse caso, também classificaríamos como ‘couldn’t fetch’, porque não tivemos tempo de buscar o arquivo de fato.”
Qualidade do site influencia o rastreamento do sitemap
O segundo motivo citado por Mueller é o que ele chamou de demanda de rastreamento. Na prática, trata-se de uma questão de qualidade percebida do conteúdo.
De acordo com Mueller, quando os sistemas do Google entendem que não há necessidade de rastrear muito mais conteúdo de determinado site, o sitemap acaba sendo ignorado.
Ele detalhou o processo:
“O outro motivo, também relacionado à carga do host, é o lado da demanda de rastreamento, onde, se nossos sistemas dizem que não precisamos rastrear muito mais desse site, vamos simplesmente pular o arquivo de sitemap porque já temos o suficiente. E a demanda de rastreamento costuma se basear na qualidade percebida de um site. Isso pode ter um impacto bem grande em quanto rastreamos e indexamos de um site. Então não é puramente uma questão técnica. Às vezes, nossos sistemas entendem que a qualidade geral do site não é das melhores. Por isso, não vamos gastar muito tempo rastreando e indexando o conteúdo. Por isso, não vamos nos preocupar com o arquivo de sitemap no momento.”
O sitemap pode simplesmente não ser necessário
Mueller ainda apontou um terceiro motivo: o Google pode concluir que não precisa daquele sitemap específico naquele momento.
Segundo ele, se a qualidade do site melhorar de forma significativa com o tempo, o Google volta a usar o arquivo. Mueller resumiu:
“Se vemos, ao longo do tempo, que a qualidade do site melhora de forma significativa, então sim, vamos usar esse arquivo de sitemap. Mas talvez simplesmente não queiramos usar agora. Então não é só uma questão técnica do meu ponto de vista ou do ponto de vista do site. É também: nós realmente precisamos do arquivo de sitemap e realmente queremos esse arquivo de sitemap?”
O que fica de aprendizado desse caso
- A mensagem pode enganar: um sitemap válido, acessível e bem linkado ainda pode aparecer como “couldn’t fetch” no Search Console.
- Sobrecarga de servidor conta: se o Googlebot não conseguir acessar o arquivo por excesso de requisições ou limite de rastreamento esgotado, o erro aparece mesmo sem falha real no sitemap.
- Demanda de rastreamento pesa: o Google pode decidir pular o sitemap quando entende que já tem informação suficiente sobre o site.
- Qualidade percebida influencia tudo: segundo Mueller, isso afeta diretamente quanto o Google rastreia e indexa de um domínio, incluindo a decisão de buscar ou não o sitemap.
Fica evidente, pela própria fala dos representantes do Google, que a mensagem “couldn’t fetch” não reflete com precisão o motivo real por trás do erro. Isso deixa quem administra sites sem uma direção clara sobre o que corrigir, já que o aviso genérico pode esconder tanto um problema técnico passageiro quanto uma questão mais profunda de qualidade do conteúdo.
Com informações de searchenginejournal.com.
