WebCrawler是由布莱恩·平克顿于1994年4月20日在华盛顿大学创建,并先后于1995年6月1日和1997年4月1日转售给American Online和Excite,2001年,在Excite(当时仍被称为Excite@Home)破产之后,InfoSpace接手了WebCrawler。
“元件搜索引擎又称集合型搜索引擎,将多个单一搜索引擎集成在一起,提供统一的检索界面,将用户的检索提问同时提交给多个独立的搜索引擎,同时检索多个数据库;并根据多个独立搜索引擎的检索结果进行二次加工,如对检索结果去重、排序等;输出给自己。”
WebCrawler是一款整合了 Google、Yahoo!、Bing Search、Ask、 AboutMIVA、LookSmart以及其它流行搜索引擎中靠前的搜索结果的搜索引擎,同时也为用户提供搜索图片、音频、视频、新闻、黄页和白页的选项。