任务流之间的调度依赖

检查任务

java 复制代码
import java.sql.SQLException;
import java.util.concurrent.Executors;
import java.util.concurrent.ScheduledExecutorService;
import java.util.concurrent.TimeUnit;

/**
 * 每一个有依赖其他flow的flow,都要先进行依赖的检查
 * 这是一个切面
 */
public class FlowCheck {


    private static String flow_id = "order";

    public static void main(String[] args) {

        ScheduledExecutorService service = Executors.newScheduledThreadPool(1);

        final MysqlDao azkabanDao = new MysqlDao();

        if (System.getProperties().getProperty("os.name").contains("Windows")) {

        } else {
            flow_id = args[0];
        }

        /**
         * 坑,会吞掉异常
         */
        service.scheduleAtFixedRate(new Runnable() {
            @Override
            public void run() {


                try {
                    MysqlDao.AzkabanExecInfo info = azkabanDao.getAzkabanJobExecInfo(flow_id);

                    /**
                     * {"ok":false,"reason":"submitDay is 2022-09-29 and today is 2022-09-30","status":"50"}
                     */
                    String output = JsonUtil.getJsonStrFromObj(info);

                    if (info.getOk()) {

                        System.out.println(output);

                        service.shutdown();
                    } else {

                        if ("30".equals(info.getStatus())) {
                            //wait
                        } else {
                            System.out.println(output);
                            service.shutdown();
                        }

                    }


                } catch (SQLException throwables) {
                    throwables.printStackTrace();
                }


            }
        }, 0, 5, TimeUnit.SECONDS);

    }
}

jobA

java 复制代码
#!/bin/bash
echo "do JobA"



r=`java -cp ./scheduler-1.0-SNAPSHOT-jar-with-dependencies.jar com.mz.scheduler.FlowCheck common_process`



echo 'result is:'$r

echo ${r} >> "${JOB_OUTPUT_PROP_FILE}"

jobB

新的flow开启的第一个job

java 复制代码
#!/bin/bash
echo "do JobB"

定义flow

jobA和jobB任务依赖文件

java 复制代码
nodes:
  - name: jobA
    type: command
    config:
      command: sh jobA.sh


  - name: jobB
    type: command
    dependsOn:
      - jobA
    config:
      command: sh jobB.sh
    condition: ${jobA:ok} == "true"

打包

这种情况下的打包需要将jar包一同打入zip

因为JobA引用了java处理的逻辑

相关推荐
坐吃山猪3 小时前
SpringBoot01-配置文件
java·开发语言
我叫汪枫4 小时前
《Java餐厅的待客之道:BIO, NIO, AIO三种服务模式的进化》
java·开发语言·nio
yaoxtao4 小时前
java.nio.file.InvalidPathException异常
java·linux·ubuntu
Swift社区5 小时前
从 JDK 1.8 切换到 JDK 21 时遇到 NoProviderFoundException 该如何解决?
java·开发语言
DKPT6 小时前
JVM中如何调优新生代和老生代?
java·jvm·笔记·学习·spring
phltxy6 小时前
JVM——Java虚拟机学习
java·jvm·学习
seabirdssss8 小时前
使用Spring Boot DevTools快速重启功能
java·spring boot·后端
喂完待续8 小时前
【序列晋升】29 Spring Cloud Task 微服务架构下的轻量级任务调度框架
java·spring·spring cloud·云原生·架构·big data·序列晋升
benben0448 小时前
ReAct模式解读
java·ai