You are viewing a plain text version of this content. The canonical link for it is here.
Posted to user-zh@flink.apache.org by 孙啸龙 <su...@126.com> on 2020/12/30 10:41:50 UTC

回撤流-窗口计算

Hi,大家好:

版本:1.12.0
方式:Flink sql
问题:双流join后是回撤流,不能窗口计算,这种应用场景是怎么处理的?

Re: 回撤流-窗口计算

Posted by 孙啸龙 <su...@126.com>.
非常感谢回复,
疑问1:实时ETL中,涉及join的操作的很多,一join之后,聚合操作就只能用非窗口计算了吗,这样不是实时etl里基本不能用到窗口和interval join?
疑问2: 
Connector='upset-kafka’,读到的是回撤流,
如果后面的操作不能使用到窗口和interval join,是不是在这种情况下 watermark用不到?

> 在 2020年12月30日,下午8:31,hailongwang <18...@163.com> 写道:
> 
> 需要的 window size 大吗,可以使用 min-batch 的 no-window agg 绕过?
> 
> 
> Best,
> Hailong
> 在 2020-12-30 17:41:50,"孙啸龙" <su...@126.com> 写道:
>> Hi,大家好:
>> 
>> 版本:1.12.0
>> 方式:Flink sql
>> 问题:双流join后是回撤流,不能窗口计算,这种应用场景是怎么处理的?


Re:回撤流-窗口计算

Posted by hailongwang <18...@163.com>.
需要的 window size 大吗,可以使用 min-batch 的 no-window agg 绕过?


Best,
Hailong
在 2020-12-30 17:41:50,"孙啸龙" <su...@126.com> 写道:
>Hi,大家好:
>
>版本:1.12.0
>方式:Flink sql
>问题:双流join后是回撤流,不能窗口计算,这种应用场景是怎么处理的?