为什么云存储网关与OSS上的文件不一致
具体而言，云存储网关在文件夹层级上设置了同步时间，当检测到当前时间与上次同步时间之差超出反向同步时间间隔时，便会触发该文件夹的同步更新操作。您可以在网关控制台的高级设置中进行配置，具体操作，请参见 文件网关反向同步的使用...
通过DataWorks将Hadoop数据同步到阿里云ES
Hadoop集群、ES实例和DataWorks工作空间需要在同一时区下，否则同步与时间相关的数据时，同步前后的数据可能存在时区差。费用说明 ES实例费用，请参见 ES计费项。独享数据集成资源组费用，请参见 独享数据集成资源组计费说明：包年包月。...
通过DataWorks将RDS SQL Server数据同步到阿里云ES
RDS SQL Server实例、ES实例和DataWorks工作空间需要在同一时区下，否则同步与时间相关的数据时，同步前后的数据可能存在时区差。费用说明 ES实例费用，请参见 ES计费项。独享数据集成资源组费用，请参见 独享数据集成资源组计费说明：包年...
通过DataWorks将HBase数据同步到阿里云ES
HBase实例、ES实例和DataWorks工作空间需要在同一时区下，否则同步与时间相关的数据时，同步前后的数据可能存在时区差。费用说明 ES实例费用，请参见 ES计费项。独享数据集成资源组费用，请参见 独享数据集成资源组计费说明：包年包月。...
通过DataWorks将MySQL数据同步到阿里云ES
RDS MySQL实例、ES实例和DataWorks工作空间需要在同一时区下，否则同步与时间相关的数据时，同步前后的数据可能存在时区差。费用说明 ES实例费用，请参见 ES计费项。独享数据集成资源组费用，请参见 独享数据集成资源组计费说明：包年包月...
网络时间同步助手
本文介绍如何通过函数计算部署网络时间同步助手，实现设备本地时间与网络时间同步。如果您的设备上已经安装了NTP服务，有和云端服务器周期性同步系统时间的能力，则无需操作本文内容。前提条件 本示例仅适用于Link IoT Edge专业版，在开始...
数据传输作业：数据集成
MaxCompute支持通过DataWorks数据集成功能将其他数据源数据同步至MaxCompute，数据集成作业主要有三种类型：离线同步、实时同步、同步解决方案。本文为您介绍MaxCompute数据集成的实现方案。离线同步 离线（批量）的数据通道通过定义数据...
ApsaraDB For OceanBase数据源
ApsaraDB for OceanBase数据源提供读取和写入...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与服务器端的网络交互次数，并提升整体吞吐量。说明 fetchSize 值过大（>2048）可能造成数据同步进程OOM。否 1,024
同步平台模型到本地代码
方式一：通过QuickFix对当前文件部分同步 BizWorks Toolkit插件会对编辑中文件做即时检查，在通过检查后的QuickFix列表中，选用适合的操作将平台模型同步到本地。示例一：示例二：方式二：对编辑中的文件全量同步 说明 全量同步只会同步...
迁移或同步指定时间段内的数据
表示从当前时间开始数据同步，到该时间戳对应的时间点结束同步。重要 如果源集群是自建HBase集群，还需在 高级配置 中添加"exporterEnable":false。单击 创建，创建同步任务并保存配置。一键迁移 您可以在一键迁移中同时配置历史迁移任务和...
解析生效时间FAQ
新增解析记录解析多久可以生效...答：云解析DNS是权威DNS服务器，在云解析DNS中变更解析记录是秒级生效的，但是这个记录的变更信息，同时还需要被同步到全国各地的本地DNS服务器上，这个同步时间则取决于本地DNS中缓存解析记录的TTL到期时间。
仓库同步
仓库同步过程中将不支持写入，请合理安排同步时间，特别是针对网络条件不佳或超大仓库的同步时，可能存在较长等待时间，你可以切换页面，同步完成后将向操作人发送邮件通知。说明 仓库同步超时时间为 10 分钟，超时将同步失败，可能提示...
数据集成
DataWorks数据集成支持复杂网络环境下的数据同步，您可在数据开发（DataStudio）界面直接 创建离线同步节点，用于离线（批量）数据周期性同步；实时同步任务运维，用于单表或整库增量数据实时同步。本文为您介绍数据同步的相关内容。背景...
SyncStat
表示多元索引的同步状态。数据结构 message SyncStat { optional SyncPhase sync_phase=1;optional int64 current_sync_timestamp=2;...current_sync_timestamp int64 是 当前同步状态的时间。格式为64位的毫秒单位时间戳。
MySQL整库周期性增全量同步至Hive
本文以MySQL为源端，Hive为目标端场景为例，为您介绍如何把MySQL整个数据库的数据离线同步到Hive。使用限制 本实践仅支持使用独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以MySQL作为来源数据源，以Hive作为...
Hologres整库周期性增全量同步至MaxCompute
本文以Hologres离线同步写入MaxCompute场景为例，为您介绍如何把Hologres整个数据库的数据离线同步到MaxCompute。使用限制 本实践仅支持使用独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以Hologres作为来源...
AnalyticDB for MySQL3.0整库周期性增全量同步至...
本文以AnalyticDB for MySQL3.0离线同步写入Hologres场景为例，为您介绍如何把AnalyticDB for MySQL3.0整个数据库的数据离线同步到Hologres。使用限制 本实践仅支持使用独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。...
创建同步ElasticSearch
这里可以看到同步任务的点位和同步时间发生了变化，同步时间就是刚刚数据写入DataHub的时间，同步点位变成了1（点位从0开始计算，点位为0表示第一条数据已经写入）。然后在ES查看一下数据的同步情况，通过Kibana可以看到数据已经同步成功。
添加云产品数据源
选择 最早同步时间。单击 完成。新建云产品数据源成功后：在 数据接入>云产品 页签下，对应添加云产品数据源同步任务，同步状态 默认为 已停止。您需手动开启云产品数据源同步，具体操作，请参见 开启云产品数据源同步。在 数据存储>冷数据...
新增同步对象
注意事项 新增对象的同步起始时间点与同步作业是否配置了 同步初始化 有关，具体如下：如果未配置同步初始化，那么同步对象会从源实例中当前时间点产生的增量数据开始同步。如果配置了同步初始化，那么新增对象会先进行结构初始化和全量...
出错提示S9磁盘分区头数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S9_*磁盘分区头数据同步出错”。其中S9_*可能的错误码如下：S9_F4 S9_F40 问题...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
基础术语
数据写入延迟 数据写入延迟是指同步到目标实例的最新数据在源数据库执行的时间戳与源实例当前时间戳的差值。同步延迟反映了目标实例跟源实例的数据时间差。当同步延迟为 0 时，表示源实例与目标实例数据完全一致。数据写入延迟仅在增量同步...
全增量数据同步
增量同步提交前，推荐修改一下源集群的日志保留时间，给增量同步出错预留一些处理的时间（hbase-site.xml 的 hbase.master.logcleaner.ttl 调大为12小时以上，重启HMaster）。客户无需在目标集群创建表，BDS同步服务会自动创建和源集群一样...
Phoenix全增量迁移
增量同步提交前，推荐修改一下源集群的日志保留时间，给增量同步出错预留一些处理的时间（hbase-site.xml 的 hbase.master.logcleaner.ttl 调大为12小时以上，重启HMaster）。客户无需在目标集群创建表，BDS同步服务会自动创建和源集群一样...
Windows系统同步时间报错
问题描述 W indows系统同步时间报错，时间同步服务无法启动，提示找不到文件。问题原因 注册表错误导致系统同步时间报错。解决方案 查看系统日志中相关的错误信息，可以看到有注册表相关的错误信息。根据日志检查注册表中如下项是否有错误...
管理数据同步任务和存储表
同步任务 查看同步任务的 同步开始时间、同步时长、同步周期（小时 和 天）和任务运行的 状态（初始化、等待中、进行中、成功、失败、已终止 和 已过期）。您可在 同步周期 和 状态 列，单击筛选图标，查看指定条件的同步任务。运行日志 ...
全增量同步任务常见问题
并进行至少一条数据的变更，同时切换数据集成实时同步开始点位到当前时间。实时任务，运行报错：com.alibaba.otter.canal.parse.exception.CanalParseException: command : 'show master status' has an error!pls check.you need(at least...
服务端接入说明
租户业务系统接入移动同步服务（Mobile Sync Service，MSS）的服务器端的开发流程主要分为以下两个步骤：接入 Java SDK，编写调用代码：采用 Java SDK 的方式进行接入。由于需求不同，编写调用代码分为 使用单数据同步接口 与 使用全局数据...
API 引入数据概览
内容引入模块支持标准的 API 内容引入，提供标准的内容引入协议，支持多源、多类型的内容快速入库。内容中台获取内容后，会进行数据校验及数据清洗，实现内容入库和缺失字段补齐。...同步成功率：成功引入的内容量在总引入内容量中的占比。
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
快速入门
Step7：钉邮绑定与同步 如果需要进行钉邮绑定与通讯录同步，请参考 钉邮绑定和通讯录同步。Step8：启用阿里邮箱 为保障邮箱账号安全请查看 阿里邮箱安全功能 介绍，进行邮箱安全防护加固；Webmail功能使用介绍请查看 阿里邮箱帮助文档-员工...
使用DataWorks（离线与实时）
最佳实践 数据库整库离线同步至MaxCompute 整库离线同步至MaxCompute OSS数据离线同步至MaxCompute EMR Hive数据整库离线同步至MaxCompute 数据库增量数据离线同步至MaxCompute RDS增量数据同步至MaxCompute Kafka增量数据同步至MaxCompute...
升级实例配置
如果当前实例配置无法满足业务需求，您可以升级实例配置。前提条件 数据迁移任务在升级配置前，须处于 迁移中、暂停中 或 迁移失败 状态。升级实例配置的操作，仅适用于数据迁移任务和数据同步作业。数据订阅通道无需升级实例配置。注意...
创建同步Hologres
起始时间 同步Hologres的最早数据同步时间 无 TimestampUnit 同步Hologres的时间单位 将数据中TIMESTAMP类型的数据（如果有），以TimestampUnit为单位进行转换后写入到下游系统的日期类型 说明 同步场景中的(dts/dts_old)同步模式适用于...
添加或移除单元节点
Ignore（遇到冲突，直接使用目标实例中的冲突记录）当数据同步遇到主键冲突时，直接跳过当前同步语句，继续往下执行，选择使用目标库中的冲突记录。同步任务不会中断。Overwrite（遇到冲突，直接覆盖目标实例中的冲突记录）当数据同步遇到...
配置数据层
杭州中心单元 创建同步任务方式 包括直接录入和手动创建的方式：直接录入：如果您在 数据传输控制台 已经创建一个状态为同步中（双向同步的反向同步链路状态也为同步中）的同步任务，则可以直接选择该同步任务进行录入。手动创建：如果您在...
配置数据层
杭州中心单元 创建同步任务方式 包括直接录入和手动创建的方式：直接录入：如果您在 数据传输控制台 已经创建一个状态为同步中（双向同步的反向同步链路状态也为同步中）的同步任务，则可以直接选择该同步任务进行录入。手动创建：如果您在...
无法更换轻量应用服务器的操作系统
选择自定义镜像重置系统时：仅支持选择与当前服务器同一地域下的自定义镜像。不支持选择当前服务器对应的自定义镜像。如果您有恢复服务器数据的需求，可以使用当前服务器对应的快照回滚磁盘数据。非中国内地地域不支持Windows Server系统和...
重置系统
选择自定义镜像重置系统时：仅支持选择与当前服务器同一地域下的自定义镜像。不支持选择包含数据盘的自定义镜像。不支持选择当前服务器创建的自定义镜像。如果您重置系统后，需要恢复原有数据，可以使用重置系统前创建自定义镜像创建新的...
- 产品推荐
- 这些文档可能帮助您