美团点评许雪里:分布式任务调度平台 XXL-JOB

发布网友发布时间：2024-09-10 07:53

共1个回答

热心网友时间：2024-10-01 08:11

许雪里，美团点评研发工程师，也是XXL系列开源产品的作者，他在一次公开演讲中介绍了分布式任务调度平台XXL-JOB。以下是XXL-JOB的主要特点和功能详解。

XXL-JOB是一个轻量级分布式任务调度框架，具备以下七个特点：

平台：统一了任务开发基础站，新手快速上手；汇总散落任务，复用业务逻辑；提供自维护和扩展功能。

HA/集群：高可用集群确保任务调度稳定运行；面对大量任务数据时，快速集群扩展。

弹性扩容：支持执行器的快速或动态扩容，应对业务量增长。

故障处理：提供故障处理策略，如失败告警、自动重试，确保任务正常执行。

阻塞处理：提供策略处理任务堆积，如队列策略或重新执行策略，确保高效处理。

高性能：全异步化调度环节，快速响应，提高任务执行效率。

自运维：提供任务执行日志管理，便于故障排查和日志分析。

XXL-JOB的架构包含调度中心和执行器两大部分。调度中心通过Quartz负责任务触发，执行器则根据调度指令执行任务。任务执行过程中的日志通过自研日志组件单独写入文件，便于在调度中心界面查看。执行器和调度中心之间的通信全异步化，确保高效稳定。

XXL-JOB的HA/集群功能保证了在部署时调度中心的高可用性，实现任务的自动调度和执行。执行器的弹性扩容功能支持自动注册和摘除，以适应不同规模的业务需求。调度轨迹和任务依赖等特性，进一步增强了平台的灵活性和可扩展性。

XXL-JOB的执行日志功能提供详细的任务执行记录，包括触发时间、状态、参数、执行时间和状态等信息。通过Rolling Log，可以查看任务的执行历史，便于故障排查和分析。

构建方式简单，仅需JDK和Mysql，通过初始化脚本、编辑调度中心、编译部署执行器完成。提供了Spring Boot和Spring外包方式的示例项目，便于快速开发和部署JobHandler。