テクニカル
ログファイル分析
サーバーのアクセスログを解析し、クローラーの実際の巡回挙動を把握する手法。
ログファイル分析とは？
ログファイル分析は、Webサーバーが記録するアクセスログを解析し、Googlebotなどのクローラーが「いつ・どのURLを・どれだけ」巡回したかを実データで把握する手法です。
Search Consoleの統計が要約値であるのに対し、サーバーログは生のクロール挙動を示します。
大規模サイトでクロールバジェットの使われ方を精密に分析する際に威力を発揮します。
ログファイル分析の使い方・実践方法
ログファイル分析でわかることは次のとおりです。
- クローラーがどのURLに時間を割いているか
- 重要ページがクロールされない/低品質URLが浪費されている状況
- クロール頻度とインデックスの相関
- ステータスコード別のクロール状況
ログファイル分析で押さえるべきポイント
ログ分析は「クローラーの目線」を直接得られる数少ない手段です。
価値の低いパラメータURLにバジェットが浪費されていないか、重要カテゴリが十分巡回されているかを確認し、内部リンクやrobots設定の改善に活かせます。
ログファイル分析を実践するなら
Saguru なら、月額270円から、SEOキーワード調査・上位サイト分析・自サイトSEO診断のすべてが使えます。
「ログファイル分析」を理解した上で、すぐに実践に移せます。
登録なしで1日5回まで無料 ／ メール登録で1日30回 ／ ベーシック月額270円 ／ 自サイトをSEO診断
ログファイル分析についてよくある質問
ログファイル分析は誰向け？
数万ページ以上の大規模サイトや、クロール効率に課題を抱えるサイトで特に有効です。
Search Consoleがあれば不要？
Search Consoleは要約値です。
URL単位の精密な巡回実態はログでしか分かりません。
URL単位の精密な巡回実態はログでしか分かりません。
必要なツールは？
Screaming Frog Log File Analyserなど専用ツールや、BigQuery等での集計が使われます。