Flink CDC 里启动多个job清洗会对原数据库的Binlog有什么影响吗?有什么推荐的方式吗?

Flink CDC 里我现在需要同步一个数据库的数据转换到另一个库,大概有100+张表数据,有些数据需要清洗。又不能影响业务正常使用。我想着用CDC程序同步,但是可能要同时起很多source job,这样对原数据库的会有什么影响吗?启动多个job清洗会对原数据库的Binlog有什么影响吗?有什么推荐...

[帮助文档] CDC数据源的配置与语法介绍

云原生多模数据库 Lindorm计算引擎提供Lindorm CDC(Change Data Capture)数据源,您可以通过该数据源使用Spark SQL查询Lindorm实例其他引擎变更的数据。

数据库仓库升级交付实践指引

6 课时 |
243 人已学 |
免费

数据库开源校企合作“数据库内核从入门到精通 ”系列课

24 课时 |
4999 人已学 |
免费

应用视角出发的数据库流量治理

1 课时 |
114 人已学 |
免费
开发者课程背景图

[帮助文档] 如何对PolarDB-X的CDC节点进行性能测试

本文介绍了对PolarDB-X的CDC节点(Change Data Captur,日志节点)进行性能测试的方法。您可以参照本文进行测试,来了解您所购买的PolarDB-X实例CDC节点的性能情况。

请教各位,如果CDC JOB停止了一段时间后,再重新启动,那么两次JOB之间的数据,会按照数据库的操

请教各位,如果CDC JOB停止了一段时间后,再重新启动,那么两次JOB之间的数据,会按照数据库的操作行为形成Insert/Update Before / Updata After / DELETE的rowkind吗?还是在第二次JOB启动的时候,只会以全量数据同步的方式,全部以Insert向后续算...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"cardStyle":"productCardStyle","productCode":"polardb","productCardInfo":{"productTitle":"云原生数据库 PolarDB PostgreSQL 版","productDescription":"阿里云自研数据库 PolarDB PostgreSQL,100%兼容 PostgreSQL,高度兼容 Oracle。为用户提供快速弹性、高性能、海量存储、安全可靠的数据库服务,同时支持阿里云自研 Ganos 多维多模时空信息引擎及开源 PostGIS 地理信息引擎。","productContentLink":"https://www.aliyun.com/product/apsaradb/polardbpg","isDisplayProductIcon":true,"productButton1":{"productButtonText":"了解详情","productButtonLink":"https://www.aliyun.com/product/apsaradb/polardbpg"},"productButton2":{"productButtonText":"管理控制台","productButtonLink":"https://polardb.console.aliyun.com/cn-hangzhou/clusters?spm=5176.28041490.J_5253785160.4.340b5820H6ZQUA"},"productButton3":{"productButtonText":"在线咨询","productButtonLink":"https://www.aliyun.com/core/online-consult?spm=5176.8789780.7y9jhqsfz.115.47ea55caeL2Mfu&from=OVtXEBmlH8"},"productPromotionInfoBlock":[{"$id":"0","productPromotionGroupingTitle":"最新活动","productPromotionInfoFirstText":"新用户3个月免费试用","productPromotionInfoFirstLink":"https://free.aliyun.com/?searchKey=PolarDB%20PostgreSQL","productPromotionInfoSecondText":"3月采购季限时优惠","productPromotionInfoSecondLink":"https://www.aliyun.com/activity/2024purchase/database"},{"$id":"1","productPromotionGroupingTitle":"快速入门","productPromotionInfoFirstText":"产品介绍","productPromotionInfoFirstLink":"https://help.aliyun.com/product/172538.html","productPromotionInfoSecondText":"快速入门","productPromotionInfoSecondLink":"https://help.aliyun.com/document_detail/139507.html"},{"$id":"2","productPromotionGroupingTitle":"最佳实践","productPromotionInfoFirstText":"AIGC 构建企业专属 chatbot","productPromotionInfoFirstLink":"https://help.aliyun.com/zh/polardb/polardb-for-postgresql/build-enterprise-specific-chatbot-based-on-polardb-postgresql-and-llm?spm=a2c4g.11186623.0.0.5ca81ad5VNjj3e","productPromotionInfoSecondText":"","productPromotionInfoSecondLink":""},{"$id":"3","productPromotionGroupingTitle":"产品推荐","productPromotionInfoFirstText":"PolarDB MySQL 版","productPromotionInfoFirstLink":"https://www.aliyun.com/product/apsaradb/polardbm","productPromotionInfoSecondText":"PolarDB 分布式版","productPromotionInfoSecondLink":"https://www.aliyun.com/product/apsaradb/polardbx"}]},"activityCardInfo":{"activityTitle":"","activityDescription":"","cardContentBackgroundMode":"LightMode","activityContentBackgroundImageLink":"","activityCardBottomInfoSelect":"activityPromotionInfoBlock"}}
相关电子书
更多
PolarDB-PG:数据库“0”改造,提升企业级应用能力
2023云栖大会:一路伴随成长-集中分布式一体化数据库
2023云栖大会:MyBase云原生浪潮下的数据库上云新选择
立即下载 立即下载 立即下载