You are viewing a plain text version of this content. The canonical link for it is here.
Posted to user-zh@flink.apache.org by Ada Luna <gf...@gmail.com> on 2021/10/13 08:28:57 UTC

Re: Flink SQL支持side output

这个没有支持的打算是因为,目前我们假定Flink SQL处理的数据都是干净的经过清洗的是吧。

Ada Luna <gf...@gmail.com> 于2021年9月19日周日 下午7:43写道:
>
> 主要是脏数据,Source、Sink或者其他算子产生的脏数据,向把这些数据侧向输出到外部数据库里存起来。
>
> Caizhi Weng <ts...@gmail.com> 于2021年9月16日周四 下午1:52写道:
> >
> > Hi!
> >
> > 就我所知目前暂时没有支持 side output 的打算。可以描述一下需求和场景吗?
> >
> > Ada Luna <gf...@gmail.com> 于2021年9月15日周三 下午8:38写道:
> >
> > > Flink SQL 未来会支持side output,侧向输出一些脏数据吗?
> > >

Re: Flink SQL支持side output

Posted by Ada Luna <gf...@gmail.com>.
举个例子

Kenyore Woo <wo...@gmail.com> 于2021年10月14日周四 上午10:37写道:
>
> 你可以把使用反向条件把脏数据输出到另外一张表去。source会复用的。其实和side output效果是一致的
> On Oct 13, 2021 at 16:28:57, Ada Luna <gf...@gmail.com> wrote:
>
> > 这个没有支持的打算是因为,目前我们假定Flink SQL处理的数据都是干净的经过清洗的是吧。
> >
> > Ada Luna <gf...@gmail.com> 于2021年9月19日周日 下午7:43写道:
> >
> >
> > 主要是脏数据,Source、Sink或者其他算子产生的脏数据,向把这些数据侧向输出到外部数据库里存起来。
> >
> >
> > Caizhi Weng <ts...@gmail.com> 于2021年9月16日周四 下午1:52写道:
> >
> > >
> >
> > > Hi!
> >
> > >
> >
> > > 就我所知目前暂时没有支持 side output 的打算。可以描述一下需求和场景吗?
> >
> > >
> >
> > > Ada Luna <gf...@gmail.com> 于2021年9月15日周三 下午8:38写道:
> >
> > >
> >
> > > > Flink SQL 未来会支持side output,侧向输出一些脏数据吗?
> >
> > > >
> >
> >

Re: Flink SQL支持side output

Posted by Kenyore Woo <wo...@gmail.com>.
你可以把使用反向条件把脏数据输出到另外一张表去。source会复用的。其实和side output效果是一致的
On Oct 13, 2021 at 16:28:57, Ada Luna <gf...@gmail.com> wrote:

> 这个没有支持的打算是因为,目前我们假定Flink SQL处理的数据都是干净的经过清洗的是吧。
>
> Ada Luna <gf...@gmail.com> 于2021年9月19日周日 下午7:43写道:
>
>
> 主要是脏数据,Source、Sink或者其他算子产生的脏数据,向把这些数据侧向输出到外部数据库里存起来。
>
>
> Caizhi Weng <ts...@gmail.com> 于2021年9月16日周四 下午1:52写道:
>
> >
>
> > Hi!
>
> >
>
> > 就我所知目前暂时没有支持 side output 的打算。可以描述一下需求和场景吗?
>
> >
>
> > Ada Luna <gf...@gmail.com> 于2021年9月15日周三 下午8:38写道:
>
> >
>
> > > Flink SQL 未来会支持side output,侧向输出一些脏数据吗?
>
> > >
>
>