集搜客GooSeeker网络爬虫

标题: 能不能设置爬虫循环采集 [打印本页]

作者: 酱紫 时间: 2016-10-24 10:51
标题: 能不能设置爬虫循环采集
我想每隔一段时间运行爬虫采集一次数据，这个有办法实现吗

作者: gz51837844 时间: 2016-10-24 15:30
可以通过周期性控制来实现，可以参考这篇文章
如何通过crontab程序实现周期性增量采集数据？

作者: Fuller 时间: 2016-10-24 22:59
现在的版本，我们推荐用会员中心的自动周期性调度，而不用crontab，因为crontab.xml文件还是挺难写的。

如果会员中心的调度周期精度还不够，可以联系GooSeeker官方进行升级

欢迎光临集搜客GooSeeker网络爬虫 (http://120.55.75.51/doc/)