You are viewing a plain text version of this content. The canonical link for it is here.
Posted to notifications@dolphinscheduler.apache.org by GitBox <gi...@apache.org> on 2019/11/29 06:42:04 UTC

[GitHub] [incubator-dolphinscheduler] Right-ydd opened a new issue #1353: 关于实时计算任务的建议 Recommendations for real-time computing tasks

Right-ydd opened a new issue #1353: 关于实时计算任务的建议 Recommendations for real-time computing tasks
URL: https://github.com/apache/incubator-dolphinscheduler/issues/1353
 
 
   **Is your feature request related to a problem? Please describe.**
   
   我们现在大部分的任务使用的是Flink实时计算,在一个工作流中,任务间没有顺序依赖
   
   ![image](https://user-images.githubusercontent.com/32353326/69848444-180b5d80-12b5-11ea-83b2-be2968711dbb.png)
   
   像图中展示的这样,在当前系统中,箭头代表任务执行的先后顺序,由于我们是实时计算,任务间是并行运行的关系,箭头仅仅代表数据流转方向,并不代表任务执行顺序。所以我们现在,在执行工作流时,会把箭头去除,让所有任务并行执行。
   
   但是,当前系统的异常通知,如果设置为失败继续,那么某一个任务的失败并不会发送通知。如果设置为失败停止,那么某一个任务的失败会导致整个工作流实例的停止。这并不是我们想要的。
   
   
   **Describe the solution you'd like**
   1、我们期望可以管理的更加细致。某一个任务的停止,异常,恢复,通知都是独立的。而不是会影响整个工作流。
   2、希望可以增加数据流转方向的连线。连线只是为了标识数据流转方向,而不是任务执行顺序
   
   **Describe alternatives you've considered**
   
   目前我们只能把每一个任务放在单独的工作流中,也就是一个工作流实例中只有一个任务
   
   **Additional context**
   
   

----------------------------------------------------------------
This is an automated message from the Apache Git Service.
To respond to the message, please log on to GitHub and use the
URL above to go to the specific comment.
 
For queries about this service, please contact Infrastructure at:
users@infra.apache.org


With regards,
Apache Git Services