みなさんこんにちは、侍マーケティングラボの所長です。
SEOを行う上で重要なクロールですが、皆さんはどこまで理解しているでしょうか?
SEOと言うと検索順位を改善することの方に意識が行きがちで、クロールに関しては見落としがちかもしれません。
自動でGoogleが行ってくれるものではありますが、実は結構奥深いのがクロールです。
この記事では僕が初心者の時に知りたかったクロールの重要性について解説していきます。
ぜひ最後まで見て行ってください！
なお当ブログのSEO記事は全てGoogle公式の見解を元に分析し作成しています。
クロールの概要について説明
まずはクロールの概要について説明していきます。
クロールとは、「Googleがインターネット上にどんなサイトがあるかを確認する」ことです。
Googleはインターネット上にあるサイトの内容を把握し、それらをリスト化しています。
ユーザーが検索したクエリと関連したリスト化されたページが検索結果画面に表示されるわけですね。
ただしインターネット上には10億を超えたサイトが存在し、日々その数は増加しています。
膨大なサイトを人力で確認することは不可能なので、Googleが開発したGooglebotというロボットが日々電子の海を巡回しているわけです。
ここで注意したいのが、Googlebotはロボットといってもターミネーターやマトリックスに出てくるような物理的存在ではなく、あくまでもプログラムです。
※所長はマトリックスが大好きなのでこの例えを用いました
補足:サイトとページの違いについて
今回の記事では「サイト」と「ページ」という単語が出てきます。
サイトはあなたのブログ自体、ページはあなたが書いたブログ記事を指していると覚えていただければ問題ありません。
クロールされると何が嬉しいの?
次にクロールされることでどんなメリットがあるのかを紹介します。
結論から言うとクロールされることでGoogleの検索エンジンに認知されるようになることが最大のメリットです。
逆に言えばクロールされていない状態だと、あなたのページ(あなたが書いたブログ記事など)がGoogle検索画面に表示されることはありません。
Googleにあなたのページをクロールさせることが、SEO対策を行っていく第一歩として非常に重要なのです。
表示順位に目を取られすぎて、実はページがクロールされていなかったというのは意外とありがちです。
そうならないよう、SEO対策をしたいページがクロールされているかどうかはしっかり確認するようにしましょう。
クロールの重要性については以下の記事でも解説しているので、あわせて確認してみてください！
Googleにページをクロールさせるには?
今までの説明でページをクロールさせる事の重要性はわかっていただけたでしょうか?
次は具体的にどうやってクロールさせるかも気になりますよね。
この項目では、Googleにあなたのページをクロールさせる方法について説明していきます。
Googleはどのようにサイトをクロールしているのか
ページをクロールさせる方法について解説する前に、そもそもGoogleはどのようにクロールを行っているのかを考えていきましょう。
基本的には、すでにクロールされているページからのリンクをたどってクロールされます。
例えば、あなたが作成したページ1からページ2に内部リンクを貼ったとします。
ページ1がクロールされていた場合、ページ2もクロールされるというわけですね。
これは外部リンクに関しても同様です。
あなたの作成したサイトが別の誰かが作成したサイトからリンクされた場合、そのリンクをたどってあなたのサイトもクロールされます。
また新しいページが登場した事をgoogleが検知すれば、そこからクロールが行われることもあるそうです。
内部リンクと外部リンクに関して詳しく知りたい方は、下記の記事も参考にしてみてください！
Googleにページをクロールさせる方法
つまりサイト内に適切な内部リンクを貼ってあげることで、あなたのサイト内のページをクロールさせる事ができるわけです。
他のサイトからの外部リンクも得る事ができればなお良いでしょう！
ここで「おや?」と思われた察しの良い方もいるのではないでしょうか?
クロールが内部リンクを伝って行われるのであれば、最初のリンクはどこから取得するべきなのでしょうか？
外部からリンクを獲得しようにも、検索結果に表示されないので外部リンクの獲得も難しいです。
クロールされるまで待つしかないのでしょうか?
新規に立ち上げたドメインではSEO対策を始めるまでに時間がかかってしまうのでしょうか?
実はそういうわけではないのです。
「サイトマップ」というデータをGoogleSearchConsoleから送信してあげることで、こちらからクロールして欲しい旨をGoogleに教えてあげることができるのです。
サイトマップの作り方や送信方法に関しては別の記事で解説していますので、気になる方はそちらも確認してみてください！
なかなかクロールされない場合の注意点
内部リンクも設定したし、サイトマップも送信したのにまだクロールされない・・・
という方はこの項目を読んでみてください。
クロールは自動でGooglebotというロボットが行うと書きましたが、このGooglebot君はすべてのページをクロールすることができるわけではありません。
具体的には以下のようなページはクロールできないのです。
- クロールが禁止されているページ
- ログインが必要なページ
このようなサイトやページはGoogleBot君がアクセスできないためクロールすることができません。
なかなかクロールされない場合は、クロールが禁止されていないか一度確認してみてください！
なかなかクロールされない場合の対処法は以下の記事でも解説していますので、あわせて確認してみてください！
まとめ
Googlebotはリンクを通じてクロールを行っているため、あなたのサイト内に適切な内部リンクを設定してあげる事で効果的にクロールさせる事が可能です。
外部リンクはコントロールがしにくいため、まずは内部リンクを充実させることを心がけるのが一番でしょう。
またサイトマップを送信することも有効なので非常におすすめです。
まずはサイトをクロールさせる事がSEO対策の基本となります。
必ずあなたのサイトがクロールされているかを確認して、クロールされていない場合は対策するようにしましょう！
お疲れ様でした！
皆さんのコメントやシェアが非常に励みになります。
もし今回の記事が参考になったと思ったら、SNSでのシェアやコメントをお願いします！
次は下記のリンクからインデックス登録について勉強しましょう！
コメントを残す