[GitHub] [incubator-dolphinscheduler] feiyalun commented on issue #2388: I recommend supporting data support across workflows（跨工作流的血缘关系建议）

[GitBox <gi...@apache.org>]

feiyalun commented on issue #2388: I recommend supporting data support across workflows（跨工作流的血缘关系建议）
URL: https://github.com/apache/incubator-dolphinscheduler/issues/2388#issuecomment-611397113
 
 
   我们一共650个脚本 源头和终点 也就是stg、 app层脚本量最多， 中间层 ods、dwd、dwa、dwr啊， 按照分层建流， 依靠节点来当天成功失败来是否往下走。如果源头的一张stg表数据坏了， 或者中层某个表数据有问题。上下游要补数据 靠跨工作流能无法实现重跑， 这个调度框架 只能在本工作流里往前执行、往后执行、仅执行本身。你一旦跨工作流了 ，就无没法实现。
     理论上是可以根据各自工作流里面的父子依赖串联起来，形成一个总的血缘图。这样后续要补数，就相对方便了。

----------------------------------------------------------------
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.
 
For queries about this service, please contact Infrastructure at:
users@infra.apache.org


With regards,
Apache Git Services