查看索引同步状态
常见问题处理 如果BDS界面中显示同步的延迟过大，超出业务承受的范围，用户可以通过自查解决问题。同步点位不再推进 如果发现BDS界面中的同步点位不再推进，通常是在HBase中写入了不合法的数据导致同步失败。此时用户可以点击右侧的详情，...
直播出现音视频不同步
概述 本文主要介绍直播出现音视频不同步的问题排查步骤。问题描述 视频播放出现音视频不同步的情况。解决方案 直播的流程是用户将视频主动推到边缘节点后进行直播，目前直播中存在音视频不同步的情况，观看直播流发现确实存在这种现象。...
Dataphin同步任务速度低
问题描述 Dataphin同步任务出现速度低，或者速度为0。解决方案 1.从网络层面判断，来源数据库、去向数据库是否都是一套专线VPC网络。2.region判断，数据库、dataphin是否部署都是在一起，如果有跨国，并且非VPC专网，速度确实可能会慢。3....
申请SSL证书出现审核失败的原因及处理方法
问题原因 解决方法 申请OV或EV类型的SSL证书，单位的电话号码是必填且需正确，如果单位电话号码为空、或输入的不符合规则时，则会出现报错。请您填写正确的且服务符合规范的单位电话号码，确保该电话号码可以联系到您。其他常见问题 问题...
RDS术语
G 高可用系列 高可用系列实例有一个备实例，主实例的数据会通过半同步的方式同步到备实例，当主实例出现故障无法访问时，会自动切换到备用实例。更多信息，请参见 高可用系列。H 回收站 部分RDS实例在过期或释放后，会进入回收站。您可以在...
RDS术语
G 高可用系列 高可用系列实例有一个备实例，主实例的数据会通过半同步的方式同步到备实例，当主实例出现故障无法访问时，会自动切换到备用实例。更多信息，请参见 高可用系列。H 回收站 部分RDS实例在过期或释放后，会进入回收站。您可以在...
MySQL分库分表同步至MaxCompute
步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务...
MySQL分库分表同步至MaxCompute
步骤一：选择同步方案 步骤二：网络与资源配置 步骤三：分库源表设置 步骤四：设置目标表 步骤五：设置表粒度同步规则 步骤六：DDL消息处理规则 步骤七：设置任务运行资源 步骤八：执行同步任务 步骤一：选择同步方案 创建同步解决方案任务...
离线同步并发和限流之间的关系
实践内容 并发数 阅读此部分，您可以解决和理解如下问题：问题一：如何配置数据同步任务的并发数？问题二：为什么我的数据同步任务跑的比较慢，实际运行的并发数不够？问题三：为什么我的同步任务并发数配置的很高，但是任务运行速度仍然很...
创建同步任务
说明 脏数据认定标准：脏数据是对业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT...
导入与导出
解决方法：非整库同步：建议重新同步这张表（即先从同步对象中去掉，然后删除目标库的表，再把这张表加入到同步对象中），DTS会重新进行包括schema拉取的全量同步，这样会跳过此类型的DDL。整库同步：在AnalyticDB MySQL中新建一张表，表名...
RDS术语
G 高可用系列 高可用系列实例有一个备实例，主实例的数据会通过半同步的方式同步到备实例，当主实例出现故障无法访问时，会自动切换到备用实例。更多信息，请参见 高可用系列。H 回收站 部分RDS实例在过期或释放后，会进入回收站。您可以在...
常见报错
本文介绍配置任务和任务运行时系统返回的报错信息（如重试信息或错误码）以及解决方法。说明 本文以正则表达式（(.*)?的形式表示报错信息中的变量。若报错无法解决，您可以 通过钉钉（钉钉通讯客户端下载地址）进入到DTS客户交流钉钉群...
离线同步常见问题
本文为您介绍离线同步的相关问题。文档概述 问题分类 相关文档 离线同步任务运维常见问题 为什么数据源测试连通性成功，但是离线同步任务执行失败？如何切换数据集成任务执行资源组？脏数据如何排查和定位？如何查看脏数据？如果离线同步...
通过脚本模式配置离线同步任务
说明 脏数据认定标准：脏数据是对业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT...
通过向导模式配置离线同步任务
说明 脏数据认定标准：脏数据是对业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT...
DB2数据源
DB2数据源作为数据中枢，为您提供读取和写入DB2数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DB2数据同步的能力支持情况。支持的版本 DB2 Reader和DB2 Writer使用的DB2驱动版本为 IBM Data Server Driver ...
SQL Server数据源
SQL Server数据源为您提供读取和写入SQL Server双向通道的功能，本文为您介绍DataWorks的SQL Server数据同步的能力支持情况。支持的版本 SQL Server Reader使用驱动版本是com.microsoft.sqlserver sqljdbc4 4.0，驱动能力具体请参见 官网...
DataStudio侧实时同步任务配置
避免混跑带来资源互相抢占、运行态互相影响等问题，例如，CPU、内存、网络等互相影响，导致离线同步任务突然变慢、实时同步任务延迟、以及在资源不足的极端情况下可能会出现任务被OOM Killer杀掉等问题。步骤三：配置实时同步任务 配置单表...
PostgreSQL数据源
PostgreSQL数据源为您提供读取和写入PostgreSQL双向通道的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的PostgreSQL数据同步能力支持情况。支持的版本 目前仅支持配置PostgreSQL数据源为PostgreSQL...
下线配置
数据同步期间，如需暂停数据同步（例如数据出现问题，需要紧急停止同步），可以通过下线同步配置来实现。进入 移动开发平台 mPaaS 控制台，选择目标应用，完成以下步骤将数据同步配置下线。操作步骤 在左侧导航栏点击 数据同步，进入数据...
Oracle数据源
常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 主备同步数据恢复问题 主备同步问题指Oracle使用主从灾备，当主库报错切换至备库后，备库从主库不断地通过binlog恢复数据。由于主备数据同步存在一定的时间差，在网络延迟等特定情况...
PolarDB PostgreSQL版间的迁移
源库、目标库出现其他问题后的重试时间 在同步任务启动后，若源库或目标库出现非连接性的其他问题（如DDL或DML执行异常），则DTS会报错并会立即进行持续的重试操作，默认持续重试时间为10分钟，您也可以在取值范围（1~1440分钟）内自定义重...
PolarDB PostgreSQL版（兼容Oracle）间的迁移
升级到2.0版本还意味着您可以与PostgreSQL社区保持同步，提供更多的资源和支持，帮助您解决问题并学习数据库的最佳实践。强烈建议您升级到 PolarDB PostgreSQL版（兼容Oracle）2.0版本，充分利用其优势。迁移评估 在您考虑进行系统迁移之前...
跨阿里云账号同步RDS MySQL实例
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE、REPLACE DDL ALTER TABLE...
功能特性
MySQL实例间的双向同步 PolarDB PostgreSQL版（兼容Oracle）集群间的双向同步 RDS PostgreSQL间的双向同步 云数据库MongoDB版间的双向同步 云原生内存数据库Tair间的双向同步 一键调转正反向同步 支持将双向同步实例的方向进行调转。...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
操作 风险 解决方式 CREATE TABLE（且该表需要同步）如果该表存在目标端是分区表，源和目标端的索引不一致，需要进行 ETL 等情况，可能影响数据迁移性能，导致 ETL 不符合预期。必须开启 DataBase 级别的 PK、UK 补偿日志。手动添加涉及的...
将MaxCompute数据同步到表格存储
如果需要将MaxCompute计算分析后的数据同步到表格存储中存储或者使用，您可以通过在DataWorks数据集成控制台新建和配置离线同步任务来实现全量数据导出。全量数据导出到表格存储后，您可以使用表格存储查询与分析数据。背景信息 表格存储...
DM（达梦）数据源
DM（达梦）数据源作为数据中枢，为您提供读取和写入DM数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DM数据同步的能力支持情况。使用限制 离线同步支持读取视图表。DM Reader和DM Writer仅支持使用 独享数据...
数据集成服务
数据导入的迁移方案包括同步MySQL数据到表格存储、同步Oracle数据到表格存储、同步Kafka数据到表格存储、同步HBase数据到表格存储、同步MaxCompute数据到表格存储、同步表格存储数据表中数据到另一个数据表和同步表格存储时序表中数据到另...
全增量实时同步至Hologres
全增量实时同步方案为您先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建全增量实时同步至Hologres任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，...
MySQL分库分表同步至Hologres（方案2.0）
背景信息 实际业务场景下数据同步通常不能通过一个或多个简单离线同步或者实时同步任务完成，而是由多个离线同步、实时同步和数据处理等任务组合完成，这就会导致数据同步场景下的配置复杂度非常高。尤其是在MySQL分库分表的场景下，上游的...
UpdateDIProjectConfig
调用UpdateDIProjectConfig修改当前工作空间中数据集成同步解决方案任务默认的全局配置。当前DataWorks仅支持为同步解决方案任务中的实时同步DDL消息处理策略设置默认的全局配置。如果您的同步解决方案任务包含实时同步任务，则配置 DDL...
如何解决增量迁移延迟或同步延迟
本文介绍导致DTS增量迁移延迟或同步延迟过大的常见原因，以及相应的解决方法。您可以逐一排查这些原因，并根据解决方法恢复任务。问题描述 DTS在进行增量任务时，迁移任务或同步任务出现延迟超过1000毫秒的情况。可能原因 原因1：任务规格...
通过Jira账号信息集成Jira工单系统
解决告警：同步解决方案到Jira问题中的评论。在钉钉群的告警卡片中的操作：认领告警：同步更新Jira问题中的经办人。说明 认领人必须在Jira中有对应的用户。将Jira操作同步至告警中 在ARMS告警管理的 集成 页面的 通知集成 页签下获取Jira的...
通过OAuth认证方式集成Jira工单系统
ARMS告警管理支持通过Jira账号信息或OAuth认证的方式集成Jira工单系统，本文介绍如何通过OAuth认证方式在ARMS告警管理中集成Jira工单系统，使告警在创建时能同时在Jira中创建问题工单，告警状态与工单状态可以实现双向同步。步骤一：配置...
接入FAQ
1.启动数字人实例遇到“没有闲置资源”提示 该提示表示您购买的数字人实例路数全部在使用中，导致无法启动新的数字人实例，您可以通过在虚拟数字人开放平台进行升配，或者将不需要运行的数字人实例进行停止，停止数字人实例需要通过...
一键实时同步至Kafka
一键实时同步至Kafka方案支持全增量一体化同步，先进行全量数据迁移，然后再实时同步增量数据至目标端。本文为您介绍如何创建一键实时同步至Kafka任务。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要同步的源...
DataV数字大屏设计介绍
本文主要介绍数字大屏的设计风格和搭建思路，以及在设计数字大屏时遇到的常见问题和解决办法。设计风格 独特清晰的风格赋予数字大屏独特的行业属性，在数字大屏设计中经常会出现需求方要求设计炫酷的要求，其中炫酷包含的关键词主要有 科技...
三个实例相互进行双向同步后出现数据缺失
问题描述 通过DTS配置三个实例之间的双向同步后，发现数据出现缺失。例如下图所示的配置场景：可能原因 双向同步场景的关键在于防止数据回环，不适用于三个实例间的互相同步。以上图为例：DB1的数据通过DTS同步至DB2时，为防止数据回环至DB...
- 产品推荐
- 这些文档可能帮助您