Resposta curta
No Cloudflare, crie uma regra em Security rules › Custom rules com User Agent contains VarridaBot e a ação Skip. Se o Bot Fight Mode estiver ligado no plano grátis, desligue enquanto audita, porque ele não aceita exceção.
O que é o VarridaBot
É o robô que a auditoria grátis e a vigia do Pro usam pra ler o site como um buscador lê: a home, o robots.txt, o sitemap e algumas páginas. Ele só visita quando alguém pede uma auditoria daquele endereço, ou quando o dono do site liga a vigia diária. Ele se apresenta assim:
Mozilla/5.0 (compatible; VarridaBot/1.0; +https://varrida.com/bot) Chrome/126 Safari/537.36Proteções anti-robô como o Cloudflare deixam passar os robôs que elas conhecem, como o Googlebot, e seguram os outros. É por isso que um site pode estar no Google normalmente e mesmo assim barrar a Varrida.
Liberar no Cloudflare
- No painel da Cloudflare, abra o domínio e vá em Security rules. Clique em Create rule e escolha Custom rules.
- Dê um nome, como Liberar VarridaBot. Em When incoming requests match, escolha Field: User Agent, Operator: contains e Value: VarridaBot.
- Em Then take action, escolha Skip e marque All remaining custom rules e All Super Bot Fight Mode rules. Se o site usa o Under Attack Mode, marque também Security Level em More components to skip.
- Clique em Deploy e confira se a regra ficou acima das regras que bloqueiam. Vale na hora.
A regra libera quem se apresenta como VarridaBot. Se preferir não deixar ela ligada, desative depois da auditoria; pra vigia diária do Pro ela precisa ficar.
Bot Fight Mode
O Bot Fight Mode, do plano grátis, roda fora do motor de regras: uma regra com Skip não faz efeito nele. Se ele estiver desafiando a Varrida, a saída é desligar em Security Settings, filtro Bot traffic, enquanto audita. No Super Bot Fight Mode (Pro, Business e Enterprise), a regra acima já resolve.
Outras proteções
A ideia é a mesma: uma exceção (allowlist) pro user agent que contém VarridaBot.
- Akamai, Imperva, DataDome e AWS WAF. Quem contratou a proteção, em geral a hospedagem ou a agência, cria a exceção no painel em poucos minutos.
- Sucuri. No painel do firewall, nas regras de acesso, libere o user agent.
- Wordfence e outros plugins do WordPress. Procure a opção de liberar (allowlist) por user agent, ou desative o bloqueio de robôs desconhecidos durante a auditoria.
- Hospedagem que responde 403 pra robôs. Peça ao suporte pra liberar o user agent VarridaBot.
Se continuar barrando
- Confira se o Google passa. No Search Console, a Inspeção de URL com Testar URL publicada mostra o que o Googlebot recebe. Se ele também levar 403 ou um desafio, o problema é maior que a auditoria.
- Veja quem barrou. Na Cloudflare, os Security events mostram qual serviço agiu (uma regra, o Bot Fight Mode, o Security Level) quando a Varrida tentou ler.
- Ainda travado? Escreva pra contato@varrida.com com o endereço do site.
Não quero o VarridaBot
Bloqueie o user agent que contém VarridaBot no firewall. A auditoria desse endereço vai mostrar que o site barrou a Varrida, e nada mais é lido.