spark代码直接运行至Flink平台

["hsdcloud@163.com" <hs...@163.com>]

  Hi,
      有个脑洞大开的想法，有没有可能出一个模块功能，可以将用户写的spark代码直接运行在Flink平台

Re: Re: spark代码直接运行至Flink平台

["hsdcloud@163.com" <hs...@163.com>]

看了下好像 Apache Beam 就是干这个事情的，学习啦 




hsdcloud@163.com
 
发件人： lec ssmi
发送时间： 2020-04-22 13:37
收件人： flink-user-cn
主题： Re: Re: spark代码直接运行至Flink平台
那还不如直接用apache beam直接将这些框架的API全部统一起来。
 
hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午11:27写道：
 
> 降低用户迁移学习成本，两个框架有类似的地方，不知道比喻是否恰当，Flink平台 是否可以类似虚拟机，上层的流批应用如java,
> spark就像Scala一样
>
>
>
>
> hsdcloud@163.com
>
> 发件人： Jeff Zhang
> 发送时间： 2020-04-22 10:52
> 收件人： user-zh
> 主题： Re: spark代码直接运行至Flink平台
> 啥目的 ？
>
> hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午9:49写道：
>
> >   Hi,
> >       有个脑洞大开的想法，有没有可能出一个模块功能，可以将用户写的spark代码直接运行在Flink平台
>
>
>
> --
> Best Regards
>
> Jeff Zhang
>

Re: Re: spark代码直接运行至Flink平台

[lec ssmi <sh...@gmail.com>]

那还不如直接用apache beam直接将这些框架的API全部统一起来。

hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午11:27写道：

> 降低用户迁移学习成本，两个框架有类似的地方，不知道比喻是否恰当，Flink平台 是否可以类似虚拟机，上层的流批应用如java,
> spark就像Scala一样
>
>
>
>
> hsdcloud@163.com
>
> 发件人： Jeff Zhang
> 发送时间： 2020-04-22 10:52
> 收件人： user-zh
> 主题： Re: spark代码直接运行至Flink平台
> 啥目的 ？
>
> hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午9:49写道：
>
> >   Hi,
> >       有个脑洞大开的想法，有没有可能出一个模块功能，可以将用户写的spark代码直接运行在Flink平台
>
>
>
> --
> Best Regards
>
> Jeff Zhang
>

Re: Re: spark代码直接运行至Flink平台

["hsdcloud@163.com" <hs...@163.com>]

降低用户迁移学习成本，两个框架有类似的地方，不知道比喻是否恰当，Flink平台 是否可以类似虚拟机，上层的流批应用如java,  spark就像Scala一样 




hsdcloud@163.com
 
发件人： Jeff Zhang
发送时间： 2020-04-22 10:52
收件人： user-zh
主题： Re: spark代码直接运行至Flink平台
啥目的 ？
 
hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午9:49写道：
 
>   Hi,
>       有个脑洞大开的想法，有没有可能出一个模块功能，可以将用户写的spark代码直接运行在Flink平台
 
 
 
-- 
Best Regards
 
Jeff Zhang

Re: spark代码直接运行至Flink平台

[Jeff Zhang <zj...@gmail.com>]

啥目的 ？

hsdcloud@163.com <hs...@163.com> 于2020年4月22日周三 上午9:49写道：

>   Hi,
>       有个脑洞大开的想法，有没有可能出一个模块功能，可以将用户写的spark代码直接运行在Flink平台



-- 
Best Regards

Jeff Zhang