クロール

クロールとは

検索エンジンのロボット（クローラー）がWebページを巡回し、コンテンツを収集するプロセスのこと。Googleの場合はGooglebotがクロールを行う。クロールされないページはインデックスに登録されず、検索結果にも表示されない。