Search engines typically disperse Web crawlers to scour the network and compile an index of existing documents.

• 一般而言，搜索引擎将Web牵引程序分散开以为网络畅通铺平道路，以及对现有文件的索引进行编译。