You are viewing a plain text version of this content. The canonical link for it is here.
Posted to user@flink.apache.org by 陈帅 <ca...@126.com> on 2020/12/14 02:19:09 UTC

flink-cdc-connector 使用场景和限制是什么?

传统CDC方式是通过 mysql -> debezium -> kafka, 这样便于DBA管控资源,因为像postgres库需要创建slot资源,但如果像 flink-cdc-connector 每(几)张表就创建一个CDC流的话对数据库的资源要求很高,而且不可控。所以我的理解flink-cdc-connector更适合少量的即席cdc处理,而不是大规模的cdc处理,不知我的理解对不对?

Re: flink-cdc-connector 使用场景和限制是什么?

Posted by Chesnay Schepler <ch...@apache.org>.
Moving to chinese user mailing ist.

On 12/14/2020 3:19 AM, 陈帅 wrote:
> 传统CDC方式是通过 mysql -> debezium -> kafka, 
> 这样便于DBA管控资源,因为像postgres库需要创建slot资源,但如果像 
> flink-cdc-connector 
> 每(几)张表就创建一个CDC流的话对数据库的资源要求很高,而且不可控。所以我的理解flink-cdc-connector更适合少量的即席cdc处理,而不是大规模的cdc处理,不知我的理解对不对?
>
>


Re: flink-cdc-connector 使用场景和限制是什么?

Posted by Chesnay Schepler <ch...@apache.org>.
Moving to chinese user mailing ist.

On 12/14/2020 3:19 AM, 陈帅 wrote:
> 传统CDC方式是通过 mysql -> debezium -> kafka, 
> 这样便于DBA管控资源,因为像postgres库需要创建slot资源,但如果像 
> flink-cdc-connector 
> 每(几)张表就创建一个CDC流的话对数据库的资源要求很高,而且不可控。所以我的理解flink-cdc-connector更适合少量的即席cdc处理,而不是大规模的cdc处理,不知我的理解对不对?
>
>