AIクローラー
AI可視性の世界の用語 – GeoStarsチームがわかりやすく解説します。
AIプロバイダーがウェブサイトを取得するために使うプログラムのことです――モデルの学習用、検索インデックス用、あるいはユーザーの問い合わせ中のライブ取得用に使われます。
このテーマで自社ブランドがどう見られているか知りたいですか?GeoStarsは、ChatGPT、Google AI Overviews、Gemini、Perplexity、Microsoft Copilot、Google AI ModeにわたるAI可視性を測定します – 初回測定は数分 · 7日間無料、請求はその後から.
AIクローラーの3つの種類
GPTBotやClaudeBotのような学習用クローラーは、将来のモデルのためにコンテンツを収集します。OAI-SearchBotやPerplexityBotのような検索用クローラーは、回答が情報源として利用するインデックスを構築します。ChatGPT-Userのようなユーザー取得型は、誰かが尋ねたときにページを取得します。現在の可視性にとって重要なのは、主に検索インデックスとライブ取得です。多くのAIクローラーはJavaScriptを実行しないため、ブラウザ側で後から読み込まれるコンテンツは見えないことが少なくありません。
観察する方法
サーバーログは、どのボットがいつどのページを取得したかを示します。GeoStarsのボット分析はこれを解析し、48種類のAIボットを識別し、アクセスをあなたのrobots.txtと照合し、URLごとに最初のボット訪問と最初の引用を関連付けます。