クローラーについて
サーバーのログにFaviconChecker/1.0があった場合、誰かがfavicon-checker.comでサイトのアイコンを確認したということです。
User-Agent
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/141.0 Safari/537.36 (compatible; FaviconChecker/1.0; +https://favicon-checker.com/bot)
リクエストはCloudflareのネットワークから送られるため、IPアドレスはCloudflareのものです。
取得するもの
- トップページ(
<head>の終わりまでしか読みません) /favicon.ico、/apple-touch-icon.png、/robots.txt、/browserconfig.xml- トップページで宣言されているすべてのアイコンとマニフェストのファイル、およびマニフェストに記載されたアイコン
通常は小さなリクエストが15〜30回、1回のチェックで最大44回までです。各ファイルは512 KBが上限で、リクエストは5秒で打ち切ります。
頻度
チェックは、人が依頼したときだけ実行されます。同じサイトを何人がチェックしても、取得は10分に1回までで、その間は保存された結果が表示されます。
robots.txt
チェックは人が開始するため、クローラーは初回訪問のブラウザーと同じファイルを取得します。robots.txtを読むのは、Googlebotがトップページやアイコンをクロールできるかを報告するためで、自分が何を取得するかの判断には使いません。
お問い合わせ
問題の報告や、サイトのチェックを止めたい場合は、ホスト名を添えてcontact@favicon-checker.comまでメールをお送りください。