zhangdm / DataScheduler

简单的数据调度脚本

运行方式

• 运行某一天

bash /data/DataScheduler/scheduler/scheduler.sh 2019-12-26

• 运行某一段时间

bash /data/DataScheduler/scheduler/set_days_run.sh 2019-10-01 2019-12-26

• 日常调度

bash /data/DataScheduler/scheduler/scheduler.sh $(date -d '-1 days' +%Y-%m-%d)

• 日志

日志打印在logs下，格式为run_运行时间，如run_2019-12-26.log

注释

1、明确从shell进入hive环境的命令，如h2cmd进入hive

默认为，h2cmd,若不是，请修改scheduler.py的第112行：_prefix = "h2cmd --verbose" ，修改h2cmd为对应的命令即可。

版本要求

python2环境，python3的调度方式待更新