小文件优化及作业诊断常见问题
问题类别 常见问题 小文件优化 MaxCompute什么情况下会产生小文件？如何解决小文件问题？作业诊断 执行并发插入操作报错，如何处理？运行作业时，报错ODPS-0130121，如何解决？创建的Shell任务执行失败，在ECS服务器执行显示成功，运维中心...
暂停DTS实例
常见问题 实例暂停后是什么状态？实例暂停后，运行状态 将会变为 已暂停。暂停的实例启动后是否可以恢复？一般情况下，暂停时间不超过24小时的DTS任务可以正常恢复；若数据量较小，则暂停时间不超过7天的DTS任务可以正常恢复。建议暂停时间...
时间属性配置说明
重跑说明 用于定义节点生成的实例是否可以重跑，即从数据幂等性考虑，任务是否可以重跑，或者在什么情况下可以重跑。生效日期 用于定义节点正常自动调度运行的时间范围，该时间范围外，节点将不再自动调度。使用说明 调度任务的时间属性...
常见问题
多个任务同时执行会有问题吗？目前Proxima CE不支持相同输入doc的多个任务同时执行，因为多个任务同时执行会导致索引的坏写，比如A任务写了某份索引，B任务会覆盖，这样会导致各种问题，常见问题如下：底层OSS Volume Filesystem相关的错误...
任务管理
任务管理就是为多任务环境中的每个任务分配一个上下文（context）（上下文（context）是指当任务被调度执行的所必不可少的一组数据，包括前任务的CPU指令地址（PC指针），当前任务的栈空间，当前任务的CPU寄存器状态等），在任务相继执行...
查看数据校验详情
为什么目标库有增量数据写入，而增量校验任务没有校验出不一致数据？增量校验任务是以源库为基准，校验目标库与源库数据的一致性。仅当源库发生数据变更且增量数据未被写入目标库，或者写入的数据与源库不一致时，才会校验出不一致数据。
基线管理
如果您需保障重要任务能按时完成，则可使用基线管理功能将重要任务添加至基线并设置承诺时间，系统将根据任务运行情况计算基线任务的预计完成时间。当系统判断基线任务可能无法在承诺时间前完成时，将发出告警。本文为您介绍如何创建和管理...
流水线的运行
因此不会出现串联的各任务同时运行的情况。另外，任务间并联，以便同时运行的功能已在开发中，敬请期待。中止任务运行 有些类型的任务，提供了中止任务运行的方法。相应操作出现在流水线上的阶段中，和/或页面下方的任务中。以构建组件为例...
数据湖管理FAQ
Lakehouse相关问题 什么是Lakehouse？Lakehouse数据入湖时，对线上RDS有压力吗？如何控制建仓的限流能力？Lakehouse工作负载为什么运行失败，又没有S park Log 日志可以看？元数据发现相关问题 为什么配置了元信息发现，并在“手动执行”...
依赖关系
上游A是小时任务，下游B是日任务，任务每天在A任务全部执行完成后要汇总执行一次，小时任务运行到第二天，天任务是否会运行，参数是否会影响 日任务B直接依赖小时任务A当天的实例，日任务B会汇总当天的小时任务。如果小时任务完成最后一个...
Db2 for LUW迁移至PolarDB MySQL版
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，数据日志：需开启，否则预检查阶段提示报错，且无法成功启动数据迁移任务。如为增量迁移任务，DTS...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启数据日志，否则预检查阶段提示报错，且...
自定义资源组
本文为您介绍自定义资源组有哪些应用场景、自定义资源组有哪些使用限制、如何使用自定义资源组等常见问题。为什么找不到自定义资源组使用入口？自定义资源组已经不再支持，请使用独享资源组。目录 如何安装监控？如何处理添加自定义调度...
RDS MariaDB实例间的迁移
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，Binlog日志：需开启，并且binlog_format为row、binlog_row_image为full。否则预检查阶段提示报错，且...
自建MariaDB迁移至RDS MariaDB
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，数据日志：需开启Binlog，并且设置binlog_row_image为full，否则预检查阶段提示报错，且无法成功启动...
智能监控
如果所有的任务都正常，即使破线也不会报警，因为所有的任务都运行正常，无法判断出哪个任务出错。任务都正常但基线仍破线的原因，通常有以下原因：设置的基线时间不合理。任务的依赖有问题，即使基线破线也不报警。变慢的任务是否可以不...
查看周期实例
相关概念 正常任务：即真实执行代码逻辑的任务，不包括空跑（调度属性为空跑的任务、调度任务在非调度时间范围内产生的实例、分支节点分支未被选中的空跑任务、实时转实例产生的过期任务等）与被冻结的任务。使用限制 版本要求：仅...
Db2 for LUW同步至PolarDB MySQL版
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。需开启数据日志，否则预检查阶段提示报错，且...
智能生产制作FAQ
通过阅读本文，您可以了解使用智能生产制作服务时常见的问题及解决方法。目录 视频剪辑时如何将成片输出至VOD中？如何获取合成任务的结果？一个合成任务需要花费多长时间？影响合成耗时的因素？为什么添加转场会缩短成片时长？为什么调用...
MySQL实例间的双向同步
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。Binlog日志：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法成功...
RDS MySQL与PolarDB MySQL版间的双向同步
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。Binlog日志：MySQL：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法...
常见问题
为什么多表归并任务报错DTS-071001？可能是在多表归并任务运行时，在源库进行了Online DDL操作，对源库的表结构等进行了修改，且未手动在目标库进行相应的修改。在旧版控制台配置任务时添加白名单失败，如何处理？请使用新版控制台配置任务...
PolarDB-X 1.0间同步
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。PolarDB-X 1.0 下面挂载的 RDS MySQL 的...
RDS SQL Server实例间数据迁移
若源实例存在如下任一情况，建议拆分为多个迁移任务。数据库超过10个。单个数据库执行日志备份操作的频率超过1次/小时。单个数据库执行DDL操作的频率超过100条/小时。单个数据库的日志量超过20 MB/s。需要开启CDC（Change Data Capture，...
RDS SQL Server实例间的迁移
若源实例存在如下任一情况，建议拆分为多个迁移任务。数据库超过10个。单个数据库执行日志备份操作的频率超过1次/小时。单个数据库执行DDL操作的频率超过100条/小时。单个数据库的日志量超过20 MB/s。需要开启CDC（Change Data Capture，...
自建SQL Server同步至PolarDB MySQL版
若源实例存在如下任一情况，建议拆分为多个同步任务。数据库超过10个。单个数据库执行日志备份操作的频率超过1次/小时。单个数据库执行DDL操作的频率超过100条/小时。单个数据库的日志量超过20 MB/s。需要开启CDC（Change Data Capture，...
RDS SQL Server间的同步
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000或时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。单次同步任务仅支持同步至多10个数据库。当...
RDS MySQL同步至PolarDB MySQL版
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。Binlog日志：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法成功...
RDS MySQL同步至PolarDB MySQL版
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。Binlog日志：RDS MySQL默认已开启Binlog，您需确保binlog_row_image的值为full，否则预检查阶段提示报错，且无法成功...
RDS MySQL迁移至PolarDB MySQL版
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，Binlog日志：需开启，并且binlog_format为row、binlog_row_image为full。否则预检查阶段提示报错，且...
PolarDB-X 1.0迁移至云原生数据仓库 AnalyticDB ...
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，须确保 PolarDB-X 1.0 下面挂载的 RDS MySQL 的参数 binlog_row_image 为 full，否则预检查阶段提示...
自建MySQL迁移至PolarDB MySQL版
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，Binlog日志：需开启，并且binlog_format为row、binlog_row_image为full。否则预检查阶段提示报错，且...
PolarDB-X 1.0迁移至PolarDB-X 2.0
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。PolarDB-X 1.0 下面挂载的 RDS MySQL 的Binlog日志：默认已开启Binlog，请参考 查看实例参数 确认binlog_row_image为...
MyBase SQL Server迁移至RDS SQL Server
若源实例存在如下任一情况，建议拆分为多个迁移任务。数据库超过10个。单个数据库执行日志备份操作的频率超过1次/小时。单个数据库执行DDL操作的频率超过100条/小时。单个数据库的日志量超过20 MB/s。需要开启CDC（Change Data Capture，...
PolarDB-X 1.0同步至PolarDB-X 2.0
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务。PolarDB-X 1.0 下面挂载的 RDS MySQL 的Binlog日志：默认已开启Binlog，请参考 查看实例参数 确认binlog_row_image为...
PolarDB-X 1.0同步至云原生数据仓库 AnalyticDB ...
如同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。PolarDB-X 1.0 下面挂载的 RDS MySQL，需确保...
PolarDB-X 1.0迁移至DataHub
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，Binlog日志：需开启，并且binlog_row_image为full。否则预检查阶段提示报错，且无法成功启动数据迁移...
PolarDB-X 2.0迁移至DataHub
当超出数量限制，任务提交后会显示请求报错，此时建议您拆分待迁移的表，分批配置多个任务，或者配置整库的迁移任务。如需进行增量迁移，Binlog日志：需开启，并且binlog_row_image为full。否则预检查阶段提示报错，且无法成功启动数据迁移...
PolarDB-X 2.0同步至DataHub
若同步对象为表级别，且需进行编辑（如表列名映射），单次同步任务的表数量超过5000时，建议您拆分待同步的表，分批配置多个任务，或者配置整库的同步任务，否则任务提交后可能会显示请求报错。Binlog日志：在PolarDB-X 2.0控制台参数设置...
离线同步并发和限流之间的关系
任务并发数配置最佳实践：任务并发数越大，任务运行需要抢占的资源越多，DataWorks数据集成任务的资源队列是FIFO（先进先出），即前面提交任务先抢占资源运行，后提交的任务后抢占资源运行。建议您合理配置任务并发数，避免大并发任务长...
- 产品推荐
- 这些文档可能帮助您