无论互联网如何发展，搜索引擎一直保持着很重要的地位。统计表明：搜索引擎

无论互联网如何发展，搜索引擎一直保持着很重要的地位。统计表明：搜索引擎一直是互联网上使用次数最多的网络服务。由于互联网上的信息数据也呈爆炸式增长，使得当前的搜索引擎获取数据的能力越来越不能满足人们的需求。基于关键字的搜索引擎只能根据关键字搜索，也就是说只能搜索包含关键字的信息，而不能根据语义来区分关键字的意思，也不能搜索到包含关键字同义词的信息数据，这导致搜索引擎的发展越来越跟不上互联网的发展了。最直接的表现就是，在越来越多的互联网数据中难以为用户查找出更加全面更加精准的结果了。因此，传统的搜索引擎已经不能适应互联网信息技术的快速发展了，但是，随着计算机及互联网通讯设备的发展，搜索引擎一直拥有大量的用户，也有很好的发展前景和经济价值，所以世界上各个信息产业人员和技术都对搜索引擎的研究和发展有极大的兴趣和高度的关注。<br>因此，基于主题和语义分析的网络爬虫和基于事件驱动的网络爬虫是未来一段时间内网络爬虫发展的两大方面。

无论互联网如何发展，搜索引擎一直保持着很重要的地位。 统计表明：搜索引擎一直是互联网上使用次数最多的网络服务。 由于互联网上的信息数据也呈爆炸式增长，使得当前的搜索引擎获取数据的能力越来越不能满足人们的需求。 基于关键字的搜索引擎只能根据关键字搜索，也就是说只能搜索包含关键字的信息，而不能根据语义来区分关键字的意思，也不能搜索到包含关键字同义词的信息数据，这导致搜索引擎的发展越来越跟不上互联网的发展了。 最直接的表现就是，在越来越多的互联网数据中难以为用户查找出更加全面更加精准的结果了。 因此，传统的搜索引擎已经不能适应互联网信息技术的快速发展了，但是，随着计算机及互联网通讯设备的发展，搜索引擎一直拥有大量的用户，也有很好的发展前景和经济价值，所以世界上各个信息产业人员和技术都对搜索引擎的研究和发展有极大的兴趣和高度的关注。<br>因此，基于主题和语义分析的网络爬虫和基于事件驱动的网络爬虫是未来一段时间内网络爬虫发展的两大方面。

No matter how the Internet develops, search engine has always maintained a very important position. Statistics show that: search engine has been the most frequently used network service on the Internet. Due to the explosive growth of information and data on the Internet, the current search engine's ability to obtain data can not meet people's needs. Keyword based search engine can only search according to keywords, that is to say, it can only search the information containing keywords, but can't distinguish the meaning of keywords according to semantics, and can't search the information data containing keyword synonyms, which leads to the development of search engine can't keep up with the development of Internet. The most direct performance is that it is difficult to find more comprehensive and accurate results for users in more and more Internet data. Therefore, the traditional search engine has been unable to adapt to the rapid development of Internet information technology, but, with the development of computer and Internet communication equipment, search engine has a large number of users, also has a good development prospect and economic value, so the world's information industry personnel and technology have great interest in the research and development of search engine We should pay more attention to it.<br>Therefore, web crawler based on topic and semantic analysis and web crawler based on event driven are two major aspects of web crawler development in the future.<br>