Наш краулер
Если вы нашли FaviconChecker/1.0 в логах сервера, кто-то проверял иконки вашего сайта на favicon-checker.com.
User agent
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/141.0 Safari/537.36 (compatible; FaviconChecker/1.0; +https://favicon-checker.com/bot)
Запросы приходят из сети Cloudflare, поэтому IP-адреса принадлежат Cloudflare.
Что загружается
- главная страница, которая читается только до конца
<head>; /favicon.ico,/apple-touch-icon.png,/robots.txtи/browserconfig.xml;- каждая иконка и файл манифеста, объявленные на главной странице, и иконки из манифеста.
Обычно это от 15 до 30 небольших запросов, но не больше 44 на одну проверку. Размер каждого файла ограничен 512 КБ, а запрос прекращается через 5 секунд.
Как часто
Проверка запускается только по запросу человека. Сколько бы людей ни проверяли один и тот же сайт, он загружается не чаще одного раза в 10 минут; в промежутке они видят сохранённый результат.
robots.txt
Поскольку каждую проверку запускает человек, краулер загружает те же файлы, что и браузер при первом посещении. Он читает robots.txt, чтобы сообщить, может ли Googlebot сканировать вашу главную страницу и иконки, а не чтобы решать, что загружать самому.
Контакты
Чтобы сообщить о проблеме или попросить нас прекратить проверки сайта, напишите на contact@favicon-checker.com и укажите имя хоста.