常见问题

可以。增加新表的方法,请参见 新增同步对象。如何修改运行中的同步任务的表和字段等同步对象?当同步任务的全量同步阶段结束,进入增量数据同步阶段后可以修改同步对象。修改同步对象的方法,请参见 新增同步对象 和 移除同步对象。暂停...

钉邮绑定和通讯录同步

如确认无需架构同步可以直接关闭截止目前的操作页面,回到钉钉OA管理后台,在首页快捷入口中找到 企业邮箱 进入,查看绑定的结果。如下是接下来的同步页面,如需同步具体请见下方 同步操作步骤;STEP2、给钉钉账号分配企业邮箱 情况一...

PolarDB-X 2.0同步至Tablestore

是否限制增量同步速率 您也可以根据实际情况,选择是否对增量同步任务进行限速设置(设置 每秒增量同步的行数RPS 和 每秒增量同步的数据量(MB)BPS),以缓解目标库的压力。环境标签 您可以根据实际情况,选择用于标识实例的环境标签。本...

离线同步并发和限流之间的关系

并发数是指数据同步任务中,可以从源端并行读取和向目标存储端并行写出数据的最大线程数。为了提高数据同步的效率,可以适当调整任务的并发数,以缩短数据搬迁需要的时间。在产品中配置位置如图所示:文件类型(OSS、FTP、HDFS、S3)数据...

FTP数据源

不写"nullFormat"这个参数,等同于“未配置”,代表来源是什么数据就直接按照什么数据写入目标端,不任何转换。否 无 markDoneFileName 标档文件名,数据同步前检查标档文件。如果标档文件不存在,等待一段时间重新检查标档文件,如果...

云数据库MongoDB版(分片集群架构)间的双向同步

MongoDB分片集群为源的单向同步不支持源端分片的扩缩容,双向同步源和目标都不支持分片数量的扩缩容,否则会导致DTS任务失败。源MongoDB分片集群实例的Mongos节点的数量不能超过10个。暂不支持同步包含TTL(Time To Live)索引的集合。若...

云数据库MongoDB版(分片集群架构)间的双向同步

MongoDB分片集群为源的单向同步不支持源端分片的扩缩容,双向同步源和目标都不支持分片数量的扩缩容,否则会导致DTS任务失败。源MongoDB分片集群实例的Mongos节点的数量不能超过10个。暂不支持同步包含TTL(Time To Live)索引的集合。若...

OSS数据源

不写"nullFormat"这个参数,等同于“未配置”,代表来源是什么数据就直接按照什么数据写入目标端,不任何转换。否 无 skipHeader 类CSV格式文件可能存在表头为标题情况,需要跳过。默认不跳过,压缩文件模式下不支持 skipHeader。否 ...

订阅者最佳实践

可以在进程内直接增加(需要保证每个实例对应一个线程,否则没有太大意义),也可以部署多个消费实例进程;需要注意的是,实例个数超过分区数量后就不再能提高速度,将会有消费实例不工作。增加消费线程。增加Consumer实例本质上也是增加...

iOS客户端Demo体验

(SmsVerifyCodeManager*)verifyCodeManager {/*注:这里需要发送网络请求从服务端获取相关参数,但是该方法需要同步返回结果,所以需要自己用信号量同步 这里属于私有线程,所有放心做同步,不会卡顿主线程 示例:SmsTokens*tokens=[...

线程状态

注意,由于JVM对OS线程了简单的抽象,所以它可以识别出一些JVM的特性(比如当前OS线程是因为Java代码执行object.wait()阻塞了,所以我们能看到操作系统线程有 MONITOR_WAIT 等状态)Java线程状态 NEW 线程刚创建 RUNNABLE 线程正在运行...

初始化OTSClient

异步接口相比同步接口更加灵活,如果对性能有一定需求,可以在使用异步接口和使用多线程之间一些取舍。说明 不管是SyncClient还是AsyncClient,都是线程安全的,且内部会自动管理线程和管理连接资源。不需要为每个线程创建一个Client,也...

场景:配置增量数据离线同步任务

具体数据源是否支持增量同步可以看具体的Reader插件文档。每个插件实现增量同步的所配置的参数可能不同,具体参数配置可以参考对应的Reader插件文档,详情可参考:支持的数据源与读写插件。例如:数据库类型 增量同步需配置的参数 支持的...

实时同步常见问题

这是Postgres本身数据库的特性,如果接受不了延迟,您可以停止任务,并重新启动任务一次全增量数据同步。报错信息与解决方案 Kafka实时同步报错:Startup mode for the consumer set to timestampOffset,but no begin timestamp was ...

数据同步简介

高实时性 当客户端连接的网络状况良好时,数据同步可以保证非常高的推送实时性,消息推送耗时几乎是纯网络传输的耗时(1s 之内送达)。基本原理 类似于 MySQL 的 binlog 机制,数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog...

关闭计算节点的CPU超线程

ECS的超线程基于HT技术,允许在一个物理核上并发地运行两个线程(Thread),一个线程可以视为一个vCPU,vCPU是ECS实例的虚拟处理核。在部分HPC场景下,需要关闭计算节点的CPU超线程,使得计算节点获得更好的性能表现。注意事项 各类型实例...

数据传输作业:数据集成

说明 MaxCompute独享数据集成资源组任务的并发值无最佳值,您需要根据实例数据量与期望同步时间设置,如果期望缩减同步时间可以购买最大并发线程数大的规格,单任务建议需要的资源规格请参见 性能指标。在配置同步任务前您需要确保数据集成...

使用数据传输同步数据

如果开启,请设置 RPS(全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制)和 BPS(全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制)。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力,全量同步实际可以达到的...

自定义和查看CPU选项

可以根据应用的性能需求灵活调整ECS实例的物理核心数和每核线程数(即调整ECS实例的vCPU),以获得更好的性能表现,并有效控制成本。例如,在内存密集型业务场景中,通过关闭超线程减少vCPU数量,可以提高内存配比,并降低软件许可费支出...

RDS MySQL同步至阿里云消息队列Kafka版

可以购买指定规格的专属集群来运行DTS同步任务,详情请参见 什么是DTS专属集群。设置告警 是否设置告警,当同步失败或延迟超过阈值后,将通知告警联系人。不设置:不设置告警。设置:设置告警,您还需要设置告警阈值和告警联系人。更多...

RDS MySQL同步至阿里云消息队列Kafka版

如果已经是在同步中的任务,则需要修改同步对象,将该表移出,再次点击修改同步对象,加入该表,并将该表的大字段列过滤,不做同步。支持的同步架构 一对一单向同步。一对多单向同步。多对一单向同步。关于各类同步架构的介绍及注意事项,...

OceanBase 数据库 MySQL 租户之间的数据同步

同步类型包括 结构同步、全量同步 和 增量同步,增量同步 包括 DML 同步 和 DDL 同步,您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update,默认全部勾选。DDL 同步 支持 ADD COLUMN ...

PolarDB-X 2.0同步至阿里云消息队列Kafka

如果已经是在同步中的任务,则需要修改同步对象,将该表移出,再次点击修改同步对象,加入该表,并将该表的大字段列过滤,不做同步。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE DDL CREATE TABLE、ALTER TABLE、...

云数据库MongoDB版(副本集架构)间的双向同步

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务...

云数据库MongoDB版(副本集架构)间的双向同步

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。双向同步实例包含正向和反向同步任务,在配置或重置双向同步实例时,若其中一个任务...

存证服务API

Client Client 类是 antblockchain-gl API 通讯协议的实现,客户端是线程安全的,多线程可以显著提高 SDK 的性能,但不是越多越好,您需要根据实际需求测试最合理的线程数。客户端采用延迟连接,创建后并不会立即与服务器连接,当发生接口...

自建Oracle同步至阿里云消息队列Kafka版

如果已经是在同步中的任务,则需要修改同步对象,将该表移出,再次点击修改同步对象,加入该表,并将该表的大字段列过滤,不做同步。支持的同步架构 一对一单向同步。一对多单向同步。多对一单向同步。级联单向同步。关于各类同步架构的...

阿里邮箱AD同步&认证

三、实现场景对比 支持的三类场景:只做同步认证、只认证不做同步、既做同步认证。三类场景略有区别,且有需要特别注意的地方。场景 区别 只做同步 1.user的userPrincipalname可以与登录的邮箱地址不一致。2.不能同步密码,同步...

MongoDB(无分片键)同步至MongoDB(分片集群架构)

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。不保留事务信息,即源库中的事务同步到目标库时会转变为单条的记录。执行数据同步前...

MongoDB(无分片键)同步至MongoDB(分片集群架构)

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。不保留事务信息,即源库中的事务同步到目标库时会转变为单条的记录。执行数据同步前...

同步 OceanBase 数据库 MySQL 租户的数据至 Analytic...

同步类型包括 结构同步、全量同步 和 增量同步,增量同步 包括 DML 同步 和 DDL 同步,您可以根据需求进行自定义配置。详情请参见 自定义配置 DDL/DML。DML 同步 包括 Insert、Delete 和 Update,默认全部勾选。DDL 同步 支持 ADD COLUMN ...

云数据库MongoDB版(副本集架构)同步至云数据库...

支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...

云数据库MongoDB版(副本集架构)同步至云数据库...

支持的同步架构 一对一单向同步 一对多单向同步 多对一单向同步 级联单向同步 关于各类同步架构的介绍及注意事项,请参见 数据同步拓扑介绍。任务步骤说明 同步类型 说明 库表结构同步 将源 云数据库MongoDB版 中同步对象的结构同步到目标 ...

RDS增量数据同步至MaxCompute

具体数据源是否支持增量同步可以看具体的Reader插件文档。每个插件实现增量同步的所配置的参数可能不同,具体参数配置可以参考对应的Reader插件文档,详情可参考:支持的数据源与读写插件。增量同步配置相关说明详情请参见:场景:配置增量...

RDS增量数据同步至MaxCompute

具体数据源是否支持增量同步可以看具体的Reader插件文档。每个插件实现增量同步的所配置的参数可能不同,具体参数配置可以参考对应的Reader插件文档,详情可参考:支持的数据源与读写插件。增量同步配置相关说明详情请参见:场景:配置增量...

RDS SQL Server同步至DataHub

为保障增量数据同步延迟的准确性,解析源端日志增量同步模式,DTS会在源库中创建触发器 dts_cdc_sync_ddl、心跳表 dts_sync_progress、DDL存储表 dts_cdc_ddl_history;混合式增量同步模式,DTS会在源库中创建触发器 dts_cdc_sync_ddl、...

同步 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...

如果开启,请设置 RPS(全量同步阶段每秒最多可以同步至目标端的数据行数的最大值限制)和 BPS(全量同步阶段每秒最多可以同步至目标端的数据量的最大值限制)。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力,全量同步实际可以达到的...

管理时间同步服务

如果您的时间同步服务运行正常可以任何修改,但如果业务要求配置指定的时间同步服务器,请参考以下操作。在实例安全组的入方向添加安全组规则并放行UDP 123端口。具体操作,请参见 添加安全组规则。远程连接Linux实例。具体操作,请...

云数据库MongoDB版(分片集群架构)同步至云数据库...

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。由于DTS写入数据的逻辑为并发写入,所以会导致目标端占用的存储空间比源端大5%~10%...

云数据库MongoDB版(分片集群架构)同步至云数据库...

若目标集合存在唯一索引或目标集合的 capped 属性为 true 时,则在增量同步阶段该集合不支持并发回放(只支持单线程写入),从而可能会导致任务延迟增高。由于DTS写入数据的逻辑为并发写入,所以会导致目标端占用的存储空间比源端大5%~10%...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据传输服务 闪电立方 混合云存储 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用