查看数据同步项目的详情
平均写入时间 同步 OceanBase 数据库的数据至 DataHub、Kafka 时，统计的是平均写入时间。平均执行时间、平均提交时间 重要 仅同步 OceanBase 数据库 MySQL 租户的数据至 AnalyticDB MySQL，以及同步 OceanBase 数据库的数据至 OceanBase ...
API 引入数据概览
内容引入模块支持标准的 API 内容引入，提供标准的内容引入协议，支持多源、多类型的内容快速入库。内容中台获取内容后，会进行数据校验及数据清洗，实现内容入库和缺失字段补齐。...同步成功率：成功引入的内容量在总引入内容量中的占比。
出错提示S9磁盘分区头数据同步出错
其中S9_*可能的错误码如下：S9_F4 S9_F40 问题原因 源系统SMC客户端进行磁盘分区头块级别的数据同步时出错，可能原因有：S9_F4：源系统磁盘分区块数据网络同步中断。S9_F40：源系统到目标实例的IP:8703端口网络连接不通。解决方案 不同的...
创建同步Hologres
起始时间 同步Hologres的最早数据同步时间 无 TimestampUnit 同步Hologres的时间单位 将数据中TIMESTAMP类型的数据（如果有），以TimestampUnit为单位进行转换后写入到下游系统的日期类型 说明 同步场景中的(dts/dts_old)同步模式适用于...
出错提示S3磁盘分区数据同步出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S3磁盘分区数据同步出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S3_*磁盘分区数据同步出错”。其中S3_*可能的错误码如下：S3_F30 S3_F32 S3_F6 S3_...
集群主机监控详情
Ntp 时钟偏移 ntp_offset_milliseconds 节点的 ntp 时钟偏移，单位：ms。OB 数据盘使用率 ob_data_disk_percent 节点的数据盘使用率，单位：百分比（%）。OB 日志盘使用率 ob_clog_disk_percent 节点的日志盘使用率，单位：百分比（%）。...
数据集成概述
但在进行上述网络环境下的数据同步前，您需要确保数据集成用于执行数据同步的资源组与您将同步的数据来源端与目标端网络环境的连通，数据集成支持您根据数据源所在网络环境，选择对应的网络同步任务，关于网络连通方案选择与配置资源组与...
部署本地块网关控制台
默认使用阿里云NTP服务器（ntp.aliyun.com），您也可以选择 手动输入时间，要求时间必须与阿里云时间同步。步骤四：激活网关 返回 云存储网关控制台。激活网关。（推荐）方法一 找到目标块网关，单击 激活网关。在 激活网关 对话框中，完成...
Outlook如何设置邮件同步时间
问题描述 Outlook发送/接收邮件时间有较大...问题原因 Outlook邮件同步时间默认为30分钟。解决方案 可以按自己的需要调整同步时间。路径：文件-选项-高级-发送/接收-安排自动发送/接收的时间间隔为xx分钟。也可以手动点击按钮触发邮件的同步
部署本地文件网关控制台
默认使用阿里云NTP服务器（ntp.aliyun.com），您也可以选择 手动输入时间，要求时间必须与阿里云时间同步。步骤四：激活网关 返回 云存储网关控制台。激活网关。（推荐）方法一 找到目标文件网关，单击 激活网关。在 激活网关 对话框中，...
仓库同步
仓库同步过程中将不支持写入，请合理安排同步时间，特别是针对网络条件不佳或超大仓库的同步时，可能存在较长等待时间，你可以切换页面，同步完成后将向操作人发送邮件通知。说明 仓库同步超时时间为 10 分钟，超时将同步失败，可能提示...
ECS实例使用的Windows系统激活失败如何解决？
如果确认系统时间明显有很大偏差，您可以在系统桌面右下角手工修改系统时间配置，也可以通过以下命令同步时钟，同步完成以后再重新激活。net start W32Time w32tm /resync 系统返回类似如下。磁盘空间满了导致激活失败 问题现象 尝试激活的...
Windows系统ECS实例激活失败
如果确认系统时间明显有很大偏差，用户可以在系统桌面右下角手工修改系统时间配置，也可以通过以下命令同步时钟，同步完成以后再执行激活。net start W32Time w32tm /resync 系统返回类似如下。磁盘空间满了导致激活失败 问题现象 尝试激活...
为什么云存储网关与OSS上的文件不一致
具体而言，云存储网关在文件夹层级上设置了同步时间，当检测到当前时间与上次同步时间之差超出反向同步时间间隔时，便会触发该文件夹的同步更新操作。您可以在网关控制台的高级设置中进行配置，具体操作，请参见 文件网关反向同步的使用...
AnalyticalStoreSyncStat
分析存储同步状态。数据结构 message AnalyticalStoreSyncStat { optional AnalyticalStoreSyncType sync_phase=1;同步状态。optional int64 current_sync_timestamp=2;最新同步时间。} 名称 类型 描述 sync_phase AnalyticalStoreSyncType...
资源组操作及网络连通
数据同步网络连通问题 在做离线同步时，我们需要先了解哪些DataWorks及其网络能力？同步ECS自建的数据库的数据时，如何保障数据库与DataWorks的网络连通？数据库和DataWorks不在同一个地域（Region）下，进行数据同步时如何保障数据库与...
文件网关反向同步的使用场景及配置
文件网关支持反向同步功能，将OSS上的元数据同步回本地，您可以在云存储网关侧观察OSS上数据的变化。使用场景 当多台云存储网关实例共同访问一个OSS Bucket时，可以实现多实例数据共享。当您需要从OSS恢复数据到云存储网关时，反向同步功能...
DRDS（PolarDB-X）数据源
DRDS（PolarDB-X）数据源为您提供读取和...否 无 batchSize 一次性批量提交的记录数大小，该值可以极大减少数据同步系统与DRDS（PolarDB-X）的网络交互次数，并提升整体吞吐量。如果该值设置过大，会导致数据同步运行进程OOM异常。否 1,024
EMR Hive数据整库离线同步至MaxCompute
本文以阿里云EMR Hive离线同步写入MaxCompute场景为例，为您介绍如何一次性把EMR Hive整个数据库的数据离线同步至MaxCompute。背景信息 Hive是基于Hadoop的一个数据仓库工具，用来进行数据的提取、转化、加载，可以存储、查询和分析存储在...
EMR Hive数据整库离线同步至MaxCompute
本文以阿里云EMR Hive离线同步写入MaxCompute场景为例，为您介绍如何一次性把EMR Hive整个数据库的数据离线同步至MaxCompute。背景信息 Hive是基于Hadoop的一个数据仓库工具，用来进行数据的提取、转化、加载，可以存储、查询和分析存储在...
同步 OceanBase 数据库的数据至 DataHub
本文为您介绍如何同步 OceanBase 数据库...如果选择同步类型时未选择 全量同步，但选择了 增量同步，请在此处指定迁移某个时间节点之后的数据，默认为当前系统时间。详情请参见 设置增量同步位点。高级选项 参数 描述 序列化方式 控制数据同步...
一键实时同步至DataHub
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标Topic 步骤五：运行资源设置 步骤六：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务，根据需求选择需要同步的源端数据源和...
一键实时同步至Elasticsearch
操作流程 步骤一：选择同步方案 步骤二：配置网络连通 步骤三：设置同步来源与规则 步骤四：设置目标索引 步骤五：DDL消息处理规则 步骤六：运行资源设置 步骤七：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务，根据需求选择...
添加边缘节点
true：表示不需要自动时间同步，已经手动完成时间同步。添加节点时需要访问的公网地址列表 访问地址 说明 cs-anony.aliyuncs.com 无 aliacs-k8s-{{region}}.oss-{{region}}.aliyuncs.com {{region}} 表示 ACK Edge集群 所在的Region ID...
概述
解决方案 T+1全量同步一键建仓是指通过DLA控制台配置数据源（RDS、PolarDB for MySQL、MongoDB数据源、ECS自建数据库数据）和目标OSS数据仓库，系统按照您设定的数据同步时间自动、无缝的帮您把数据源中的数据同步到目标数据仓库OSS中，...
选型推荐
亚秒级（最大更新间隔为NFS/SMB客户端缓存刷新时间）成本固定，在API调用小于2,000 万次的情况下，每月（按30天计算）成本计算方式如下：（2+0.5x共享数）x30 反向同步 500 万个以下 同步速率取决于扫描比对的时间，难以估算。大于15秒...
动态修改schema
源索引和灰度索引均处于增量阶段，且“源索引最后同步时间-60 s灰度索引最后同步时间”，即灰度索引落后源索引的时间不超过1分钟。计费说明 灰度索引构建和数据写入不会产生费用。源索引和灰度索引均会产生与存储规模有关的存储和预留读CU...
查询同步初始化详情
调用DescribeInitializationStatus查询同步初始化详情，即待同步对象的结构和存量数据初始化到目标库的情况。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例...
数据下载
反向同步时间间隔 最小值为15s，最大值为36000s，默认值为36000s。说明 如果Bucket内的对象比较多，建议反向同步间隔大于3600s，否则会由于反复扫描产生大量的OSS API的请求费用。复制模式高级选项 勾选 复制模式高级选项。在 复制模式高级...
将表格存储数据表中数据同步到另一个数据表
使用通道服务、DataWorks或者DataX将表格存储数据表中的数据同步到另一个数据表。前提条件 已创建目标数据表，目标数据表的列必须与源数据表中待迁移的列一一对应。具体操作，请参见 创建数据表。说明 如果要实现跨账号、跨地域数据迁移，...
实时同步DataHub的数据至Hologres
将DataHub数据同步至Hologres适用于需要实时数据分析、实时监控、实时报表和复杂数据结构处理的场景，通过结合DataHub和Hologres的能力，可以提升数据处理和分析的效率和准确性。本文介绍如何创建DataHub数据同步任务以及常见问题。背景...
组织系统配置
右侧显示采集数据最近一次成功同步时间，下方显示相应的维表表名、字段名（根据同步到ADB的行为数据自动加工的行为维表）。设置 数据存储周期。说明 若存储周期由大改小，例如由60天修改为45天，则次日同步时，会将最老的16天数据删除。若...
自助分析数据集
下方显示上次同步时间。单击 更新并保存，开始将人群表同步到Quick BI侧。此时关闭弹窗不会影响同步任务，同步完成后将提示已完成。新建自助分析数据集 说明 新建自助分析数据集前，需要管理员先进行 自助分析配置，选择自助分析的数据来源...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
配置NTP服务
对于这类时间敏感的业务场景，在部署容器应用时，您可以为ECI实例配置NTP服务来确保实例内容器的时间同步准确，从而解决时间不准确导致的问题，保证数据准确性和业务正常运行。配置说明 说明 仅支持通过OpenAPI配置，控制台暂不支持。调用...
离线同步写入MongoDB数据
DataWorks的数据集成为您提供MongoDB Writer插件，可从其他数据源中读取数据，并将数据同步至MongoDB。本文以一个具体的示例，为您演示如何通过数据集成将MaxCompute的数据离线同步至MongoDB。前提条件 本实践进行操作时，需满足以下条件。...
智能导购设置
智能导购设置包含客户标签管理、导购权限管理、组织管理。其中组织管理可以管理零售公司、门店信息，可以从企业微信同步组织与门店、导购信息。客户标签管理 同步逻辑 系统初始化时 导购后台选择导购可见...固定自动同步时间为每日00：00点。
添加云产品数据源
选择 最早同步时间。单击 完成。新建云产品数据源成功后：在 数据接入>云产品 页签下，对应添加云产品数据源同步任务，同步状态 默认为 已停止。您需手动开启云产品数据源同步，具体操作，请参见 开启云产品数据源同步。在 数据存储>冷数据...
MySQL分库分表实践
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
云数据库MongoDB版（副本集架构）间的双向同步
目前DTS支持进行检测的冲突类型包括：INSERT导致的唯一性冲突 同步INSERT语句时违背了唯一性约束，例如双向同步的两个节点同时或者在极为接近的时间INSERT某个主键值相同的记录，那么同步到对端时，会因为已经存在相同主键值的记录，导致...
- 产品推荐
- 这些文档可能帮助您