基于WEB的网络爬虫的设计

该网络爬虫的设计，主要是针对网络的爬虫相关信息进行研究，利用python技术进行网站的信息爬取，并且采用了django框架，进行系统的设计，数据库采用了mysql数据库进行数据的存储。爬虫的设计，主要是爬取了旅游的相关数据，并对旅游信息进行查看。网站的功能如下：

旅游数据爬取：网站的实现主要是先进行数据的爬取，得到旅游相关的数据，并且进行数据的爬取，获取数据后，进行数据的存储等，方便网站进行搜搜。
网页搜索：和普通的搜索引擎一样，可以在网页中，搜索出相关的信息，并且会将来源进行展示，网站的网址信息，点击会进行跳转。
图片搜索：可以实现图片信息ID搜索，获得图片的相关信息展示，并且对图片的来源进行列表显示。
用户管理：能够对网站的相关的用户信息进行展示管理，用户只有登录网站系统后，才能够使用相关的搜索功能，用户的管理，是网站的重要功能，通过对网站用户的管理，就可以管理员用户。