クロール可能性
クロールバビリティーとは、検索エンジンがウェブサイトに効率的にアクセスし、クロールし、巡回できる能力のことを指します。検索エンジンが適切にページをクロールできない場合、コンテンツの質に関わらず、それらのページがランキングされることはありません。
検索エンジンは、すべてのサイトにクロール予算を割り当てています。クロールバビリティーが低いと、この予算が重要でないURLやリンク切れのページに浪費され、価値のあるページの発見が遅れてしまいます。
ある大規模なコンテンツサイトでは、数千ものパラメータベースのURLがクロールされていました。robots.txtでそれらをブロックし、内部リンクを改善した結果、重要なページがより頻繁にクロールされるようになり、数週間以内にランキングが向上しました。
一般的なクロールバビリティーの障壁
- 内部リンク切れ(404エラー)
- robots.txtの不適切な設定
- 重要なページへのnoindexタグの設定
- 階層の深いサイト構造(ホームページから4回以上クリックが必要なページ)
小さなクロールの障壁であっても、大規模なサイトでは積み重なると大きな影響を及ぼします。
クロールバビリティーを改善するためのベストプラクティス
- クリーンな内部リンク構造を維持する
- XMLサイトマップを使用してクローラーを誘導する
- 価値の低いURLを意図的にブロックする
- Google Search Consoleのクロールレポートを定期的に監視する
検索エンジンには、推測させるのではなく、的確なガイドを示すべきです。