爬虫web展示

项目介绍

​ 结合基本的Javaweb所完成的项目。该项目实现了爬取特定网站的功能，将本需要挨个进官方页面才能看到的信息爬取整合到一个页面中来。实现该项目运用了最基本的web方面的技术以及java爬虫方面HTTP请求方面的类和方法来实现的小项目。

环境

1. jdk8
2. Tomcat9.0
3. STS(可以创建Maven项目，这里我直接将所需要的jar文件add进去了)

代码逻辑

使用说明

1. 打开页面，没有任何数据，需要手动点击左边一列按钮来触发后台爬取数据从而达到呈现的目的

   

2. 展现的名称是一个链接，可以直接点击直达所需要的页面

   

3. 最后那个按钮实现的某些新闻网的爬取（每天更新的新闻可以直达这个页面）

   

小结

​ 该项目还有很多需要完善点，比如前端展示分页功能。由于没有对接数据库，所以总体对数据的操控性不是很好。