Distributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言和框架
Home Page:https://www.crawlab.cn
Geek Repo:Geek Repo
Github PK Tool:Github PK Tool
Lxingy opened this issue 6 months ago · comments
请描述该需求尝试解决的问题 当任务以shell 命令发送时,由于脚本持续爬取,前端取消任务后,节点任务依旧在执行。
请描述您认为可行的解决方案 可在构建爬虫任务时,配置,点击取消,触发一条自定义的命令。(或多个爬虫任务依次自动执行)
考虑过的替代方案 运行命令后,记录进程号,点击取消则杀死这个进程。