Quando você audita seu site com a ferramenta de Auditoria de site, enviamos um rastreador para inspecionar as páginas que você especificou na configuração da ferramenta.
No entanto, é possível encontrar problemas relacionados ao rastreamento, como:
- O rastreador rastreia o site muito rápido e bloqueia temporariamente um site ou deixa-o lento para os usuários.
- O rastreador rastreia o site muito rápido e, como resultado, as páginas não carregam corretamente. Isso faz a Semrush apresentar “falsos positivos” (relatar erros encontrados na auditoria que não seriam relatados se a auditoria rastreasse o site a uma taxa mais lenta e o site não travasse como resultado).
- O rastreador está demorando muito para rastrear o site e você está esperando muito para obter os resultados.
Acelere a Auditoria do site
Se o rastreamento de sua Auditoria do site for muito lento, você pode acelerá-lo na etapa de definir configurações do rastreador da janela de configuração.
Para acelerar a Auditoria do site, escolha “atraso mínimo entre páginas” para rastrear o site o mais rápido possível.
Esta ação garante que nosso bot vai ignorar quaisquer instruções de atraso de rastreamento indicadas no robots.txt do site e rastreie na maior velocidade possível.
Se ainda não estiver satisfeito com a velocidade de seu rastreamento, a outra medida que você pode tomar é acelerar o carregamento das páginas. Páginas com carregamento lento atrasam o rastreamento.
Mas não se esquece que se um bot estiver rastreando seu site em uma velocidade muito alta, isso pode resultar em carregamento de páginas mais lento para usuários.
Portanto, em certos casos, é aconselhável desacelerar o rastreamento, em vez de acelerá-lo.
Desacelere a Auditoria do site
Se o bot da Auditoria do site estiver rastreando o seu site muito rápido, poderá travar temporariamente um site ou torná-lo mais lento para os usuários e apresentar resultados falso-positivos. Diminua a velocidade de rastreamento para garantir que os resultados relatem a experiência do usuário do site.
Para desacelerar sua auditoria, você tem algumas opções que você pode definir em suas definições de configuração:
- Instrua a Semrush a rastrear 1 URL a cada 2 segundos. Isso garante que o rastreamento não sobrecarregue o servidor do seu site com uma abundância de atividades em um curto espaço de tempo.
- Defina um atraso de rastreamento personalizado no arquivo robots.txt de seu site. Se você escolher a opção “respeitar o robots.txt” na hora de configurar a auditoria, o nosso bot vai rastrear as páginas na velocidade que você indicou.
Por exemplo, se você adicionar “Crawl-delay: 5” ao seu arquivo robots.txt, o bot vai esperar 5 segundos antes de acessar o site para visualizar outra página. Novamente, isso garante que o rastreamento ocorra em um ritmo que não travará ou desacelerará o site (veja abaixo).User-agent: SemrushBot Crawl-delay: 5 User-agent: SiteAuditBot Crawl-delay: 5
Observação: o atraso máximo de rastreamento que podemos aplicar é 30, portanto, o nosso bot vai entender qualquer número acima de 30 como 30.
Se você ainda estiver enfrentando problemas na hora de fazer auditoria do site, confira o nosso guia de solução de problemas ou entre em contato com nossa equipe de suporte.
Voltar a Kits de ferramentas da Semrush categoria