关于项目

本项目主要目的是做个简单的爬虫,技术上主要使用SpringBoot+javafx。
(目前暂定将爬取的数据存放在文件中,后续再考虑存放数据库等等)

关于爬虫

爬虫,也叫网络爬虫,是一种按照设计者的预定的方式,在网络中自动收集有用的信息,并将信息分类和整理,最终将整理的结果提供给用户,以方便用户冲中查找他们感兴趣的信息。

项目计划

  1. 搭建项目框架
  2. 实现爬虫的核心逻辑(文件)
  3. 爬虫数据录入数据库逻辑
  4. javafx界面

项目搭建

打开https://start.spring.io/,按照下图配置,然后点击Generate按钮,页面会自动打包生成当前配置的springboot启动项目,并自动下载。

导入项目

将下载下来的包解压缩,然后在idea中新建工程,选择new project from exists Sources导入,等项目导入完成(这里需要用到maven,不熟悉的可以去官网查看http://maven.apache.org/),如下图: