天任务依赖分钟任务最佳实践

数据同步节点用来同步每5分钟调度一次的MySQL数据至MaxCompute。ODPS SQL节点用来汇总MaxCompute接收的数据。单击工具栏中的 图标。配置作为分钟任务的离线同步节点。双击离线同步节点,进入该节点的编辑页面。选择 数据来源 和 数据去向。...

CreateRepoSyncRule-创建镜像仓库同步规则

创建镜像仓库同步规则。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中...

RDS增量数据同步至MaxCompute

本文以同步业务RDS数据库的数据至MaxCompute为例,为您介绍如何对不同场景的数据进行增量同步。背景信息 根据需要同步的数据在写入后是否发生变化,分为恒定的存量数据(通常是日志数据)和持续更新的数据(例如人员表中,人员的状态会发生...

RDS增量数据同步至MaxCompute

本文以同步业务RDS数据库的数据至MaxCompute为例,为您介绍如何对不同场景的数据进行增量同步。背景信息 根据需要同步的数据在写入后是否发生变化,分为恒定的存量数据(通常是日志数据)和持续更新的数据(例如人员表中,人员的状态会发生...

CreateRepoSyncTaskByRule-创建镜像仓库同步任务

根据同步规则(限手动同步规则)创建镜像仓库同步任务。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM...

GetRepoSyncTask-查询仓库同步任务

同步任务 ID rst-zxjkiv5oil6f*返回参数 名称 类型 描述 示例值 object SyncRuleId string 同步规则 ID crsr-cllro6ho3wne*Progress long 同步进度,取值:0:表示同步刚开始或同步失败 1:表示同步成功 1 RequestId string 请求 ID A6DEF8...

新增配置

一条同步配置相当于一个具体的数据推送的业务场景,而业务数据推送就是实现该配置所对应的业务场景。因此,在推送业务数据之前,需要先创建同步配置。进入 移动开发平台 mPaaS 控制台,选择目标应用,完成以下步骤以新增配置。操作步骤 在...

使用Outlook插件进行邮箱通讯录及日历的双向同步

阿里邮箱提供Outlook插件,支持查看组织通讯录、写信页联系人联想和日历同步。插件下载路径。一、指引教程 1.1 安装 安装过程中会检查插件运行所需要的环境,如果机器没有安装,插件会给予提醒框提示,点击确定会自动打开环境下载地址。...

操作流程

数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

操作流程

数据同步主要内容包括数据源配置、获取物理表、创建同步任务三方面。本文介绍数据同步的操作流程。流程图 流程说明 流程 说明 配置数据源 配置数据同步的源端和目标端。数据同步的源端,是数据同步任务的起点。数据同步目标端是同步的终点...

Dataphin集成任务中多表同步是如何同步

产品名称 Dataphin 产品模块 集成任务,多表同步 概述 本文为您介绍Dataphin管道集成任务中源表选择多表同步是怎样同步的 问题描述 集成任务同步数据中源表选择了多表同步,为什么右边的界面只显示了部分表的字段 问题原因 不清楚选择多表...

离线同步数据质量排查

背景信息 讲述数据集成数据同步的原理机制,理解数据同步的过程,进而对数据同步的执行效果有判断能力,判断数据同步效果具体包括:数据同步的数据量、目标端数据实际数量等。同步原理 DataWorks数据集成的同步任务在执行时称之为一个Job,...

通过image-syncer工具迁移容器镜像

在Kubernetes集群迁移场景中,镜像仓库之间进行镜像迁移和同步是基本需求,image-syncer工具可以解决通用的容器镜像批量迁移和镜像同步复制的问题,将已有的容器镜像平滑的迁移到阿里云镜像服务ACR上。本文主要为您介绍如何通过image-...

通过image-syncer工具迁移容器镜像

在Kubernetes集群迁移场景中,镜像仓库之间进行镜像迁移和同步是基本需求,image-syncer工具可以解决通用的容器镜像批量迁移和镜像同步复制的问题,将已有的容器镜像平滑地迁移到阿里云镜像服务ACR上。本文主要为您介绍如何通过image-...

逻辑解码的同步复制支持

简介 逻辑解码可以被用来构建同步复制方案,该方案具有和流复制的同步复制相同的用户接口。要这样做,流复制接口必须被用来流式传出数据。正如流复制客户端所做的一样,逻辑解码的客户端必须发出 后备机状态更新(F)消息。说明 一个通过逻辑...

Java SDK 接入

本文介绍如何以 Java SDK 的方式在服务端接入数据同步服务。引入 Jar 包 完成 Maven 配置后,在主控 pom.xml 文件中引入如下依赖:<dependency><groupId>...

钉钉配置

同步类型可以选择手动同步或者自动同步,手动同步是仅同步一次,自动同步会在选择的时间点定时自动触发同步,如果钉钉有人员或部门变动都会同步到网盘 如果钉钉人员离职后,同步程序不会在网盘中删除该用户,只会禁用,需要管理员做好交接...

数据同步简介

基本原理 类似于 MySQL 的 binlog 机制,数据同步服务器和客户端 SDK 之间传递的基本数据单元为 oplog,当业务需要同步一个变更数据到指定的用户或设备时,业务调用数据同步接口,数据同步服务端会将业务需要同步的数据变更包装为一个 ...

跨账号同步ECS主机名

什么是同步ECS主机名 同步ECS主机名,是指通过PrivateZone自动获取ECS服务器实例信息中的主机名配置,然后根据ECS主机名在privateZone中一键生成相应的内网DNS解析记录(即主机名记录)。什么是跨账号同步ECS主机名 跨账号同步ECS主机名是...

离线同步并发和限流之间的关系

同步速率:数据同步速率和任务期望最大并发数是比较强相关的参数,两者结合在一起可以保护数据来源和数据去向端的读写压力,以避免数据同步任务对数据源带来较大压力,影响数据源的稳定性。同步速率(不限流)是指按照用户配置的任务期望...

实时同步任务告警设置最佳实践

对于DataWorks数据集成的实时同步任务、全增量同步任务的实时同步阶段,您可以设置任务告警规则,用来监控同步任务的状态,本文为您介绍实时同步任务告警设置的指标有哪些,并为您示例一个最佳实践。告警规则指标 您可以在DataWorks的运维...

跨账号同步ECS主机名

什么是同步ECS主机名 同步ECS主机名,是指通过内网DNS解析自动获取ECS服务器实例信息中的主机名配置,然后根据ECS主机名在内网DNS中一键生成相应的内网解析记录(即主机名记录)。什么是跨账号同步ECS主机名 跨账号同步ECS主机名是指,例如...

迁移上云

云消息队列 Kafka 版 提供全托管、免运维的迁移上云服务,用于自建实例或跨云云实例与 云消息队列 Kafka 版 实例之间的数据同步。本文介绍迁移上云的源实例类型、使用限制、跨VPC数据同步以及使用流程。前提条件 您已购买并部署 云消息队列...

RDS MySQL同步至Elasticsearch

本文介绍如何使用数据传输服务DTS(Data Transmission Service),将 RDS MySQL 同步至 Elasticsearch。前提条件 已创建源 RDS MySQL 实例,详情请参见 快速创建RDS MySQL实例。已创建目标 Elasticsearch 实例,详情请参见 创建阿里云...

常见问题

如果业务对数据要求比较精确,您可以删除目标库的数据,然后重新配置同步任务,并在 任务步骤 同时选中 库表结构同步 和 全量同步(默认已选中 增量同步)。DTS全量同步任务长时间没进度,如何处理?若待同步的表为无主键的表,全量同步会...

如何主动触发特定文件夹的反向同步

本文介绍如何通过云存储网关主动触发特定文件夹的反向同步。前提条件 已创建共享。具体操作,请参见 创建共享。操作步骤 您可以通过调用TriggerGatewayRemoteSyncRequest接口来实现主动触发特定文件夹的反向同步。说明 云存储网关Python ...

设置一个EIAM应用的账户同步功能配置

调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略语句的 Action 元素中使用,用来给RAM用户或RAM角色授予调用此API的权限。具体说明如下:操作:是指具体的权限点。访问级别:是指每个操作的访问级别,取值为写入(Write)、读取...

同步日志

在当前版本中,不同同步方式下,同步日志的记录情况如下:入方向 出方向 记录同步日志 从身份提供方同步 由 IDaaS 推送给应用 由 IDaaS 推送给身份提供方(暂不支持)不记录同步日志,但会记录为管理或用户日志 OpenAPI Developer API(暂...

迁移消费者程序

背景信息 云消息队列 Kafka 版 控制台提供迁移实例功能,您可以使用该功能将自建Kafka集群或其他云Kafka集群的元数据(Topic和Group配置信息)和消息数据同步到目标集群,迁移完成后目标集群的元数据与源集群的元数据保持一致并且持续更新...

商品管理

其他门店同步改价 当前大多门店是千店一面的模式,所有商品都是集团统一管理,价格、详情在每个门店的信息都是相同的,当一个商品价格发生变动,需要去后台进行改价操作 改价弹窗增加同步选项,勾选后门店同步改价 修改前:8、修改:勾选...

同步用户

调用 CreateUser 接口同步用户信息至云产品平台。使用说明 创建会议及加入会议前,ISV 需将本地用户信息同步到钉钉会议中,用户信息中数据均为 ISV 维护。将同步用户信息至云产品平台,若已存在则更新,否则为新增。请求参数 参数 类型 ...

CreateRDSToClickhouseDb-创建同步任务

调用CreateRDSToClickhouseDb接口创建云数据库ClickHouse社区兼容版同步任务。接口说明 说明 该接口仅适用于云数据库 ClickHouse 的社区兼容版集群。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,...

创建类似任务

数据传输服务DTS(Data Transmission Service)提供的创建类似任务功能,可以将原同步或迁移实例的部分配置作为新实例的默认配置,帮助您方便快捷地创建有相似配置的实例。在创建类似任务的过程中,您可以修改配置,以便快速创建一个满足您...

CreateUserProvisioning-创建RAM用户同步

调用CreateUserProvisioning创建RAM用户同步。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...

ListUserProvisionings-查询RAM用户同步列表

调用ListUserProvisionings查询RAM用户同步列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限...

GetUserProvisioning-查询RAM用户同步

调用GetUserProvisioning查询RAM用户同步信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...

UpdateUserProvisioning-修改RAM用户同步

调用UpdateUserProvisioning修改RAM用户同步。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在RAM权限策略...

GetUserProvisioningEvent-查询RAM用户同步事件

调用GetUserProvisioningEvent查询RAM用户同步事件信息。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在...

ListUserProvisioningEvents-查询RAM用户同步事件列表

调用ListUserProvisioningEvents查询RAM用户同步事件列表。调试 您可以在OpenAPI Explorer中直接运行该接口,免去您计算签名的困扰。运行成功后,OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息,可以在...

创建同步任务

说明 创建数据源,数据源可以用来作为数据同步的来源或者去向,LTS支持的数据源请参见“数据源管理”。创建HBase数据迁移任务,详情请参见 HBase不停机迁移。创建数据导入任务,详情请参见 HBase数据导入。创建数据导出任务,详情请参见 ...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
轻量应用服务器 云数据库 RDS 云服务器 ECS 数据库备份 DBS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用