分布式任务调度框架xxl-job

分布式任务调度框架

xxl-job解决的问题

解决集群任务的重复执行问题

cron表达式定义灵活

定时任务失败,进行重试和统计

任务量大,可以分片执行

xxl-job的路由策略

常用:

Round轮询
Failover故障转移
Sharding_Boardcast分片广播

可以根据分片参数发放分片任务

xxl-job任务执行失败怎么解决

故障转移+失败重试

设置路由策略为故障转移
并且设置失败重试次数

如果任务依然失败

我们可以通过查看xxl-job日志分析,或者查看xxl-job发生的邮件告警

大数据量任务同时执行

选择分片广播作为任务路由策略

将任务项取模进行分片,分给不同的分片执行

相关推荐
keep__go7 分钟前
spark 单机安装
大数据·运维·分布式·spark
蒙特卡洛的随机游走8 小时前
Spark的persist和cache
大数据·分布式·spark
蒙特卡洛的随机游走8 小时前
Spark 中 distribute by、sort by、cluster by 深度解析
大数据·分布式·spark
梦里不知身是客118 小时前
Spark中的宽窄依赖-宽窄巷子
大数据·分布式·spark
过往记忆8 小时前
Kafka 作为事件流的商业模式正在消亡
分布式·kafka
KYumii8 小时前
智慧判官-分布式编程评测平台
vue.js·spring boot·分布式·spring cloud·java-rabbitmq
百***99248 小时前
RabbitMQ高级特性----生产者确认机制
分布式·rabbitmq
小坏讲微服务12 小时前
Spring Cloud Alibaba Gateway 集成 Redis 限流的完整配置
数据库·redis·分布式·后端·spring cloud·架构·gateway
方圆想当图灵13 小时前
Nacos 源码深度畅游:Nacos 配置同步详解(下)
分布式·后端·github
方圆想当图灵13 小时前
Nacos 源码深度畅游:Nacos 配置同步详解(上)
分布式·后端·github