多くの人がGoogle、Yahoo!、Bingを始めとする大手検索エンジンからの訪問者を増やしたいと考えています。
グーグルやヤフーから訪問者を導くためには、まずそれぞれのデータベースにホームページの情報が記録されていなければなりません。 当たり前のことですね。 住所録に登録されていなければ、URLを紹介出来ない、検索結果に載せようがないということです。
ホームページの情報を集めるのはクローラーと呼ばれるロボットです。 グーグルやヤフーは、それぞれ独自のクローラーを使ってホームページの情報を収集しています。
グーグルやヤフーの検索結果にホームページが表示されるには、まずホームページがクローラーの巡回（クロール）を受けることが必要です。 それには、既にこれらの検索エンジンに登録（インデックス）されているサイトからリンクしてもらうことが、唯一ではありませんが、確実な方法の１つです。
クローラーはリンクを辿って次のサイトへとクロールします。 検索エンジンはクローラーが集めた情報をデータベースに記録していきます。 これで、検索結果に表示されるための最低限の条件を満たすことができるわけです。