通过Django管理周期性任务-feapder爬虫 一开始感兴趣的信息比较少,直接用crontab启动就满足要求了。后台爬虫越来越多，有的爬虫早就失效了，也没发现。只能花时间自己搞一个简易版管理系统。

爬虫管理系统FEAPLAT部署与使用 去年用feapder写了几个小爬虫，定时收集自己感兴趣的数据，运行的挺稳定的。官方的 feaplat爬虫管理系统，新版本好像可以免费20个采集任务,够自己用了。