クローラー

検索エンジンのデータベースを作成するために、世界中のありとあらゆるホムページのデータを回収するプログラム。検索エンジンに検索されるためには、クローラーがサイトを訪れる必要がある。

 

- 目 次 -