スパイダー

Spider

コンピタント株式会社

スパイダーとは、サーチエンジンの検索データベースを作成するために、あらゆるWebページの情報を回収するプログラムのことを言う。
スパイダーは、全文検索型サーチエンジンの検索処理に必要なデータベースを作成するプログラムであり、未収録のページや更新後のページ情報をデータベースに回収していく。
クローラ、クローラーと呼ばれることも多い。