0


【任务调度】Apache DolphinScheduler中关于全局参数设置、自定义参数、补数的介绍

Apache DolphinScheduler是一个分布式和可扩展的开源工作流协调平台,具有强大的DAG可视化界面。

今天在海豚调度的一个接口中想入参一个当前时间(要求格式为yyyyMMddhhmmss),找了找发现如下几种方法,给记录一下:

1.全局参数设置
在设置DAG图名称这一位置设置全局参数,这个设置的参数便可以设置成自己想要的日期格式,在接口处添加入参时该入参便可以通过

  1. c
  2. o
  3. m
  4. p
  5. l
  6. e
  7. m
  8. e
  9. n
  10. t
  11. d
  12. a
  13. t
  14. e
  15. 得到
  16. {complement_date}得到
  17. complementdate得到{yyyy-MM-dd}这个时间值。

在这里插入图片描述
2.自定义参数
在这里插入图片描述
基础内置参数有上述三个,但是衍生出来的却有许多个,如下图:
在这里插入图片描述
在这里插入图片描述

3.补数
何为Apache DolphinScheduler 补数功能?
3.1补数一天,如下图
未开启补数时,

  1. [
  2. y
  3. y
  4. y
  5. y
  6. M
  7. M
  8. d
  9. d
  10. ]
  11. :默认获取当前日期开启补数功能,
  12. [yyyy-MM-dd] :默认获取当前日期 开启补数功能,
  13. [yyyyMMdd]:默认获取当前日期开启补数功能,[yyyy-MM-dd] :获取的是,序号4位置所设置的调度日期

在这里插入图片描述
3.2补数一段时间,如下图
串行执行补数逻辑:点击运行,传入 2023-02-05 执行一遍 test_ds_bushu 里面所有的 job,执行完成传入 2023-02-06 执行一遍,直至传入 2023-02-09 执行一遍结束。
在这里插入图片描述

  1. 补数据使用的参数
  2. ${system.biz.date}: 日常调度实例定时的定时时间前一天,格式为 yyyyMMdd,补数据时,该日期 +1
  3. ${system.biz.curdate}: 日常调度实例定时的定时时间,格式为 yyyyMMdd,补数据时,该日期 +1
  4. ${system.datetime}: 日常调度实例定时的定时时间,格式为 yyyyMMddHHmmss,补数据时,该日期 +1

4.归纳总结:

  1. ${system.biz.date} ${system.biz.curdate} ${system.datetime} 这三个完全可以不用在补数的,直接在全局参数设置、自定义参数设置中使用也可以的。
  2. ${system.biz.date} 为日常调度实例定时的定时时间前一天(yyyyMMdd格式)${system.biz.curdate} 为日常调度实例定时的定时时间(yyyyMMdd格式)${system.datetime} 为日常调度实例定时的定时时间(yyyyMMddHHmmss格式)
  1. 参考文档
  2. DolphinScheduler使用系统时间
  3. https://xionglang.blog.csdn.net/article/details/125444442?spm=1001.2101.3001.6650.3&utm_medium=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7ERate-3-125444442-blog-114333766.235%5Ev43%5Epc_blog_bottom_relevance_base6&depth_1-utm_source=distribute.pc_relevant.none-task-blog-2%7Edefault%7ECTRLIST%7ERate-3-125444442-blog-114333766.235%5Ev43%5Epc_blog_bottom_relevance_base6&utm_relevant_index=6
  4. 大数据|海豚调度官方文档注解
  5. https://blog.csdn.net/Changxing_J/article/details/134001440
  6. Apache DolphinScheduler补数功能应用
  7. https://blog.csdn.net/m0_58048130/article/details/129834825?utm_medium=distribute.pc_relevant.none-task-blog-2~default~baidujs_baidulandingword~default-4-129834825-blog-126719140.235^v43^pc_blog_bottom_relevance_base6&spm=1001.2101.3001.4242.3&utm_relevant_index=7
标签: java apache

本文转载自: https://blog.csdn.net/weixin_42369773/article/details/139130678
版权归原作者 奋进的孤狼 所有, 如有侵权,请联系我们删除。

“【任务调度】Apache DolphinScheduler中关于全局参数设置、自定义参数、补数的介绍”的评论:

还没有评论