Googlebotとは?

更新日:
Googlebotとは?

Googlebotとは?

GooglebotとはGoogleが開発したクローラーの一つです。インターネット上でアクセスが許可されているすべてのWebページをクロールして、Googleにインデックスします。

Googlebotには、デスクトップ用のGooglebotとモバイル用のGooglebotが存在します。その他、画像用や動画用など複数のサブタイプが存在します。Googleが取り扱うクローラーの詳細はGoogle公式のヘルプをご参照ください。

参考:Google クローラの概要(ユーザー エージェント) - Search Console ヘルプ

Webサイトがモバイルファーストインデックスに移行している場合、クロールの大部分はモバイル用のクローラーが使用され、一部でデスクトップ用のクローラーが使用されます。

\プロのノウハウを詰め込みました!資料ダウンロードはこちらから/

GooglebotとSEO

Googlebotは必ずしもWebサイト内のすべてのページをもれなく巡回できるわけではありません。そのため、サイト管理者は定期的にXMLサイトマップを送信したり、robots.txtによってクロール制御したり、リダイレクト・canonicalの設定によってURLを正規化したりなど、Googlebotのクローラビリティを意識する必要が出てきます。

参考:クローラーとは?SEOにおけるクローラ向け最適解の6つのポイント

また、「ユーザーが見えているコンテンツ」と「Googlebotが認識できるコンテンツ」にズレが生じる場合があります。Googlebotが認識できないものには、Ajaxなどの技術で非同期に読み込まれるコンテンツや、閲覧にCookieが必要なコンテンツなどが挙げられます。

Googlebotはページ上でクリックやスクロールなどのアクションをしません。ユーザーのアクションをキッカケに「新たにファイルをダウンロードする」ような仕様になっていると、その部分のファイルのコンテンツは無視されてしまうので注意が必要です。

SEOについて詳しく知りたい方はこの記事も読んでみてください。

Googlebotの情報検出の精度は日々改善されているものの、JavaScriptを使用したナビゲーションリンクなども推奨されません。

Googlebot は、HTML リンクの構造を理解することには長けていますが、ナビゲーションに JavaScript を使用しているサイトの検出は苦手です。Google では JavaScript の読解能力の強化に取り組んでいますが、Google や他の検索エンジンによるクロールが可能な、コンテンツへの HTML リンクを記載したサイトを作成することをおすすめします。

出典:アクセシビリティに対応した AJAX サイトの設計 - Search Console ヘルプ

URL検査ツールでGooglebotのレンダリング状況を確認する

Googlebotがサイトにアクセスする頻度とサイト内のどのページをクロールしたかを調べるにはGoogle Search Consoleの「URL検査ツール」(旧Fetch as Google)を使います。

URL検査ツールでは大きく次の4つのことができます。

URLの現在のインデックスステータスの確認

URL検査ツールを使用することで、Googleのインデックスに登録されたページ、そして何らかの問題でインデックス出来なかった理由を確認できます。

公開 URL の検査

Search Consoleで管理してるサイトの公開URLをテストすることで正常にインデックスされているかどうかを確認することができます。

URL のインデックス登録リクエスト

URLをGoogleにクロールまたは再クロールさせるようにリクエストできます。リクエストからインデックス登録までは1~2週間程度かかります。

レンダリングされたページの表示

Googleがどのようにページを認識しているかをスクリーンショットで確認できます。

 

上記それぞれの使い方の詳細については公式ヘルプを参照ください。

参考:URL 検査ツール - Search Console ヘルプ

また、ナイルではSEOについてまとめた資料をご用意しております。SEOについて把握したいなら、まずはこの3点の資料をご覧ください。

  • SEO成功事例・法則資料
  • SEO1問1答 全30問
  • SEO内製化 (インハウスSEO) 進め方ロードマップ

具体的な内容については、ダウンロードの上、ご確認ください。

「さらにSEOを学びたい!」という方へ

ナイルの人気SEO資料3点セットです。 SEO初心者の方やSEOについて把握したい方は、まずはこの3点の資料をご覧ください!

無料で資料を受け取る

ナイルの無料相談に申し込む

ナイルのSEO相談室」は業界歴15年超のナイルが運営しているメディアです。SEOの最新情報を随時発信しているので、ぜひブックマークしてください!

またSEOにお悩みの方は無料相談やSEOコンサルティングサービスのご利用もぜひご検討ください!

ナイル編集部

編集者情報

ナイル編集部

2007年に創業し、約15年間で累計2,000社以上の会社にマーケティング支援を行う。また、会社としても様々な本を出版しており、業界へのノウハウ浸透に貢献している。(実績・事例はこちら

2007年に創業し、約15年間で累計2,000社以上の会社にマーケティング支援を行う。また、会社としても様々な本を出版しており、業界へのノウハウ浸透に貢献している。(実績・事例はこちら

PIVOTにもスポンサード出演しました!

PIVOTにもスポンサード出演しました!
チャンネル登録者数が100万人を超えるYoutubeチャンネルPIVOTにスポンサード出演しました!
動画内では、マーケティング組織立ち上げのための新しい手段についてお話しています。
マーケティング組織に課題がある方はぜひご覧下さい。
動画を見る

関連記事

meta-robotsとは?robots

meta robotsの仕様と制御できるものを解説

【徹底解説】アンカーテキストとは?SEOやCV改善に重要な点を解説

【徹底解説】アンカーテキストとは?SEOやCV改善に重要な点を解説

robots.txtとは?目的や書き方、設定方法について

【気をつけて設定しよう】robots.txtの設定目的や書き方について

新着記事

【速報】本日12/13AMよりGoogle検索アルゴリズム コアアップデートが開始

【SEO会社22選】SEOコンサルティング会社の選び方や事前に確認すべき点は?

サイトマップとは?

サイトマップとは?2種類それぞれの作成法やSEO効果を解説

サイト内検索

目次に戻る

もっと効果的な集客施策
してみませんか?

Web戦略の情報を
定期的に受け取りたい方

取材・メディア掲載に関するお問い合わせは、こちらからお問い合わせください。