爬虫项目技术选型 财富值99

2016-10-27 17:24发布

我想写个爬虫,使用webmagic在后台跑,数据持久化到elasticsearch,然后用springboot来提供查询界面。

有两个疑惑∶

1.请问爬虫那部分代码是单独写一个项目独立启动,还是作为整个项目的子模块,用springboot自带的定时调度来后台跑?

2.集成的话,数据存储和索引是用spring data的接口直接存到es呢,还是我自己用es的java client API裸写好?

友情提示: 问题已经关闭,关闭后问题禁止继续编辑,回答。
该问题目前已经被作者或者管理员关闭, 无法添加新回复
0条回答

一周热门 更多>