安装 APScheduler
$ pip3 install apscheduler
快速开始
基本概念
APScheduler四大组件:
触发器 triggers
:用于设定触发任务的条件
任务储存器 job stores
:用于存放任务,把任务存放在内存或数据库中
执行器 executors
: 用于执行任务,可以设定执行模式为单线程或线程池
调度器 schedulers
: 把上方三个组件作为参数,通过创建调度器实例来运行
触发器
每一个任务都有自己的触发器,触发器用于决定任务下次运行的时间。
任务储存器
默认情况下,任务存放在内存中。也可以配置存放在不同类型的数据库中。如果任务存放在数据库中,那么任务的存取有一个序列化和反序列化的过程,同时修改和搜索任务的功能也是由任务储存器实现。
注!一个任务储存器不要共享给多个调度器,否则会导致状态混乱
执行器
任务会被执行器放入线程池或进程池去执行,执行完毕后,执行器会通知调度器。
调度器
一个调度器由上方三个组件构成,一般来说,一个程序只要有一个调度器就可以了。开发者也不必直接操作任务储存器、执行器以及触发器,因为调度器提供了统一的接口,通过调度器就可以操作组件,比如任务的增删改查。
调度器组件详解
根据开发需求选择相应的组件,下面是不同的调度器组件:
BlockingScheduler
阻塞式调度器:适用于只跑调度器的程序。BackgroundScheduler
后台调度器:适用于非阻塞的情况,调度器会在后台独立运行。AsyncIOScheduler
AsyncIO调度器,适用于应用使用AsnycIO的情况。GeventScheduler
Gevent调度器,适用于应用通过Gevent的情况。TornadoScheduler
Tornado调度器,适用于构建Tornado应用。TwistedScheduler
Twisted调度器,适用于构建Twisted应用。QtScheduler
Qt调度器,适用于构建Qt应用。
任务储存器的选择,要看任务是否需要持久化。如果你运行的任务是无状态的,选择默认任务储存器MemoryJobStore
就可以应付。但是,如果你需要在程序关闭或重启时,保存任务的状态,那么就要选择持久化的任务储存器。如果,作者推荐使用SQLAlchemyJobStore
并搭配PostgreSQL作为后台数据库。这个方案可以提供强大的数据整合与保护功能。
执行器的选择,同样要看你的实际需求。默认的ThreadPoolExecutor
线程池执行器方案可以满足大部分需求。如果,你的程序是计算密集型的,那么最好用ProcessPoolExecutor
进程池执行器方案来充分利用多核算力。也可以将ProcessPoolExecutor
作为第二执行器,混合使用两种不同的执行器。
配置一个任务,就要设置一个任务触发器。触发器可以设定任务运行的周期、次数和时间。APScheduler有三种内置的触发器:
date
日期:触发任务运行的具体日期interval
间隔:触发任务运行的时间间隔cron
周期:触发任务运行的周期
一个任务也可以设定多种触发器,比如,可以设定同时满足所有触发器条件而触发,或者满足一项即触发。
触发器详解
date 在指定时间点触发任务
其中run_date参数可以是date类型、datetime类型或文本类型。
datetime类型(用于精确时间)
文本类型
未指定时间,则会立即执行
interval 周期触发任务
你可以框定周期开始时间start_date和结束时间end_date。
sched.add_job(job_function, 'interval', hours=2, start_date='2010-10-10 09:30:00', end_date='2014-06-15 11:00:00')
也可以通过scheduled_job()装饰器实现
jitter振动参数,给每次触发添加一个随机浮动秒数,一般适用于多服务器,避免同时运行造成服务拥堵。
cron 强大的类crontab表达式
当省略时间参数时,在显式指定参数之前的参数会被设定为,之后的参数会被设定为最小值,week 和day_of_week的最小值为。比如,设定day=1, minute=20等同于设定year=”, month=”, day=1, week=”, day_of_week=”, hour=’*’, minute=20, second=0,即每个月的第一天,且当分钟到达20时就触发。
表达式类型
start_date 和 end_date 可以用来适用时间范围
# 在2014-05-30 00:00:00前,每周一到每周五 5:30运行
sched.add_job(job_function, 'cron', day_of_week='mon-fri', hour=5, minute=30, end_date='2014-05-30')
通过 scheduled_job() 装饰器实现:
使用标准crontab表达式:
也可以添加jitter振动参数
夏令时问题
有些timezone时区可能会有夏令时的问题。这个可能导致令时切换时,任务不执行或任务执行两次。避免这个问题,可以使用UTC时间,或提前预知并规划好执行的问题。