ジャンプ先:

Web クローラーは、一般的に bot や robot と呼ばれるプログラムです。クローラーは自動的に Web をブラウズし、Web ページからデータを収集します。一般的に、検索エンジンは、クローラーを使用してインデックスを構築します。

詳細情報

ドキュメントのタグと貢献者

このページの貢献者: Uemmra3, dskmori, YuichiNukiyama
最終更新者: Uemmra3,