Spring是否有Web Scraping的解决方案？

Question

我需要构建一个Web应用程序，它将抓取并抓取一些网站并提取数据，抓取工具将具有调度程序。我知道有很多工具可以解析和提取像Jsoup这样的数据，但我只想知道我是否可以使用Spring Tools来实现这一点？

Answer 1

Spring没有适合您的案例的单一模板项目。但是你绝对可以通过Spring实现你想要的。 Spring提供了许多template projects来开发不同类型的应用程序。有一个Spring Boot项目可以快速开始使用Web应用程序。调度任务有Spring Scheduler项目。我会建议结合这两者并开发你的应用程序。

对于抓取和刮取，我相信Spring没有可用的模板。但是你可以使用jSpider和jSoup来完成。