crawlab-team / crawlab

Distributed web crawler admin platform for spiders management regardless of languages and frameworks. 分布式爬虫管理平台,支持任何语言和框架

Home Page:https://www.crawlab.cn

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

是否可以只保留最近30天的artifacts表数据

ma-pony opened this issue · comments

请描述该需求尝试解决的问题
长时间运行后,artifacts表占用磁盘空间过大

请描述您认为可行的解决方案
自动删除30天前的artifacts表数据

考虑过的替代方案
手动删除30天前的artifacts表数据

后续版本会废弃artifact这个模型了

---- Replied Message ---- | From | @.> | | Date | 06/13/2024 18:41 | | To | crawlab-team/crawlab @.> | | Cc | Subscribed @.> | | Subject | [crawlab-team/crawlab] 是否可以只保留最近30天的artifacts表数据 (Issue #1480) | 请描述该需求尝试解决的问题 长时间运行后,artifacts表占用磁盘空间过大 请描述您认为可行的解决方案 自动删除30天前的artifacts表数据 考虑过的替代方案 手动删除30天前的artifacts表数据 — Reply to this email directly, view it on GitHub, or unsubscribe. You are receiving this because you are subscribed to this thread.Message ID: @.>

我如果直接清空artifacts表,会对系统产生什么影响嘛

建议不要直接清空,可以考虑将task id导出来,然后将其查询artifact的id,删除。直接删除可能会造成不可预料的问题

建议不要直接清空,可以考虑将task id导出来,然后将其查询artifact的id,删除。直接删除可能会造成不可预料的问题

好的好的