SEO関連 クローラとは


  


クローラについて。

@なぜ、 Yahoo! や Google の検索結果に表示されるのか?


Yahoo! や Google などで検索すると、色々なホームページが検索結果として表示されますが、これはどういった仕組みで表示されるのでしょうか?


答えは、クローラと呼ばれるプログラムが、インターネット上のサイトを巡回しながら、情報を集めており、検索結果は、こ のクローラが集めた情報を基に、検索結果を表示しています。


逆に言うと、クローラがサイトの情報を収集しに来てくれないと、検索結果には表示されないのです。




Aクローラのお仕事。


具体的に、クローラはどういった動きをするかというと、


・ページの内容を読み取って、データベースに溜め込む。

・そのページの中にリンクがあればそれをたどる(行った先のページでまた同じ事をする)。


この2つをしています。


また、その頻度については、


・頻繁に更新されるホームページには、頻繁に訪れる。
・たまにしか更新されなホームページには、たまにしか訪れない。


となっています。


クローラが来ないと、いつまでたってもホームページが検索結果に表示されません。


その為、クローラを呼ぶ方法もあります。