巡回ロボット・クローラーとは

SEOでは、ロボット型検索エンジンのクローラー（巡回ロボット）と呼ばれるプログラムがインターネット上のホームページを自動で巡回し、そして、ホームページの情報をクローラー（巡回ロボット）が取得し、検索エンジンのインデックスのデータベースに格納します。

格納された情報を、検索エンジン（Yahoo!【ヤフー】、Google【グーグル】、Bing【ビング】など）ごとの基準で、単語に切り分けされ、キーワードの中で『どの単語が多く含まれるか』、『どのような単語がサイトの中で重要か』を判断し、そして、検索エンジンが利用しやすい形にデータを整理し、データベースに格納します。

クローラー（巡回ロボット）によって集められた情報を元に、ユーザーが検索したキーワードを『どのサイトがそのキーワードの内容にあっているか』を判断し検索結果に表示されます。

この検索結果で、閲覧されやすい上位にホームページを表示されるようにするのがSEOの目的になります。

クローラーが、ホームページを巡回するときに、そのページの最初から順番に見ていくので、ファイルのサイズが大きすぎる場合、また、JavaScriptなどで動きのあるページの場合には、

クローラーがすべての情報を集める前に、別のページに移動してしまうことがあります。

Htmlのソースコードがあまりにも複雑すぎたり、Htmlの文法的におかしい場合も同じようになります。

W3Cなどで文法やCSSが適切になっているか確認することも良いですね。

PR

検索エンジン