Nosso crawler
Se você encontrou FaviconChecker/1.0 nos logs do seu servidor, alguém usou o favicon-checker.com para testar os ícones do seu site.
User agent
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/141.0 Safari/537.36 (compatible; FaviconChecker/1.0; +https://favicon-checker.com/bot)
As requisições vêm da rede da Cloudflare, então os endereços IP pertencem à Cloudflare.
O que ele baixa
- a página inicial, lida só até o fim do
<head>; /favicon.ico,/apple-touch-icon.png,/robots.txte/browserconfig.xml;- cada arquivo de ícone e de manifest que a página inicial declara, e os ícones listados no manifest.
Isso costuma dar de 15 a 30 requisições pequenas, nunca mais de 44 por verificação. Cada arquivo é limitado a 512 KB, e a requisição desiste após 5 segundos.
Com que frequência
Uma verificação só roda quando uma pessoa a pede. Por mais gente que verifique o mesmo site, ele é baixado no máximo uma vez a cada 10 minutos; nesse intervalo, as pessoas veem o resultado salvo.
robots.txt
Como cada verificação é iniciada por uma pessoa, o crawler baixa os mesmos arquivos que um navegador baixaria em uma primeira visita. Ele lê o robots.txt para informar se o Googlebot pode rastrear a sua página inicial e os seus ícones, não para decidir o que ele mesmo baixa.
Contato
Para relatar um problema ou pedir que paremos de verificar um site, envie um e-mail para contact@favicon-checker.com com o nome do host.