GEO・AI検索用語集
AI Crawler(AIクローラー)
AIクローラーとは、AIシステムのためにWebコンテンツを取得するボットです。モデルの学習のため(GPTBot、ClaudeBot)、またはユーザーへのライブ回答の取得のため(OAI-SearchBot、Perplexity-User)に動作します。
ほとんどのAIクローラーはJavaScriptを実行しないため、クライアントサイドでレンダリングされるコンテンツは見えません。静的またはサーバーレンダリングされたHTML、クリーンなセマンティックマークアップ、高速なレスポンスが、ページがそもそも読めるかどうかを決めます。
ポリシーも重要です。robots.txtがどのボットを受け入れるかを決めます。AI可視性を追求するブランドは一般的に検索(リトリーバル)ボットを許可します。学習ボットのポリシーはビジネス判断ですが、すべてをブロックするとAIの回答から自社が消えてしまいます。