web crawler 基本例句 万维网搜索程序 Firstly, we introduce the main function of the web/span> crawler and the present condition of technology of web crawler; 论文首先介绍了网络爬虫所起的作用以及网络爬虫技术的发展现状； fabiao Generally, search engine is consisting of web crawler, index construction, retrieval and user interface. 一般来说，搜索引擎都由搜索器、索引器、检索器和用户接口四个部分组成。 fabiao