Windows系统同步时间报错
问题描述 W indows系统同步时间报错，时间同步服务无法启动，提示找不到文件。问题原因 注册表错误导致系统同步时间报错。解决方案 查看系统日志中相关的错误信息，可以看到有注册表相关的错误信息。根据日志检查注册表中如下项是否有错误...
Linux实例重启后修改的系统时间未生效
问题原因 修改系统时间后没有将时间同步至硬件时钟。解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前创建...
部署前检查
服务器相关操作 您需要登录节点服务器，完成同步系统时间、安装依赖软件和用户管理相关操作，以下是具体操作步骤：在节点客户端中，确认已同步系统时间。若没有同步系统时间，请手动校准系统时间或使用 NTP 服务自动校准系统时间。执行以下...
Windows系统ECS实例激活失败
网络异常导致激活失败 服务器时钟不同步导致激活失败 磁盘空间满了导致激活失败 激活码不正确导致激活失败 Software Protection异常导致激活失败 问题现象 使用 slmgr-ato 命令对Windows系统进行激活时，系统出现以下错误。运行“slui.exe ...
ECS实例使用的Windows系统激活失败如何解决？
网络异常导致激活失败 服务器时钟不同步导致激活失败 磁盘空间满了导致激活失败 激活码不正确导致激活失败 Software Protection异常导致激活失败 问题现象 使用 slmgr-ato 命令激活Windows系统时，系统出现以下错误。运行“slui.exe 0x2a 0...
RDS SQL Server间的同步
支持的同步架构 一对一单向同步 一对多单向同步 级联单向同步 多对一单向同步 关于各类同步架构的介绍及注意事项，请参见 数据同步拓扑介绍。支持同步的SQL操作 操作类型 SQL操作语句 DML INSERT、UPDATE、DELETE 说明 不支持同步仅更新...
读写访问文件类问题
如何处理多个ECS实例挂载同一NFS协议文件系统出现数据不同步的情况？为什么卸载旧NAS并重新挂载新NAS后，容器Pod仍将数据写入旧NAS？服务器重启或停机后，为什么NAS里的文件看不到了？为什么Linux挂载SMB协议文件系统迁移和复制文件时速度...
节点诊断
节点系统出现AUFS mount hung问题，请收集节点日志并 提交工单 处理。关于收集节点日志操作，请参见 一键采集节点的诊断日志。节点内核BufferIOError情况 检查节点内核是否出现BufferIOError。节点内核出现BufferIOError情况，请收集节点...
常见问题
同步解决方案常见问题 MySQL一键同步至Hologres中decimal（7，4）数据类型转换成了numeric（38，18），正常吗？一键实时同步至MaxCompute时,分表是否可以同步到同一张表里?一键实时全增量同步任务中，实时同步时修改源表字段是否会导致报错...
通过MySQL分析实例同步至数仓版
说明 同步状态 为 同步中 表明该同步作业正常进行增量同步，更多关于同步任务状态的信息，请参见 DTS同步作业状态。DTS同步作业状态 同步作业状态 状态说明 配置中 同步作业正在配置中。预检查中 同步作业正在进行启动前的预检查。预检查...
DB2数据源
数据同步系统会启动并发任务进行数据同步，以提高数据同步的效能：推荐 splitPk 用户使用表主键，因为表主键通常情况下比较均匀，因此切分出来的分片也不容易出现数据热点。目前 splitPk 仅支持整型数据切分，不支持浮点、字符串和日期等...
分析实例简介
RDS MySQL提供分析实例功能，可以将RDS MySQL主实例中的数据自动同步到分析实例中，解决RDS MySQL复杂分析与查询时卡顿的问题，实现毫秒级针对万亿级数据进行即时的多维分析透视和业务探索。使用场景 随着企业业务发展，精细化实时运营诉求...
事件管理
例如业务出现风险、服务器运行缓慢、接口响应延时过高等一系列问题均属于事件。它可能影响工作效率、降低客户体验，即使未造成严重后果，也应该归类为事件。事件来源一般分为：人工上报 系统发现 事件管理是针对事件进行识别、记录、分类、...
DM（达梦）数据源
DM（达梦）数据源作为数据中枢，为您提供读取和写入DM数据库的双向通道，能够快速解决海量数据的计算问题。本文为您介绍DataWorks的DM数据同步的能力支持情况。使用限制 离线同步支持读取视图表。DM Reader和DM Writer仅支持使用 独享数据...
SQL Server数据源
当配置此项后，数据同步系统就会忽略tables、columns配置项，直接使用这项配置的内容对数据进行筛选，例如需要进行多表join后同步数据，使用 select a,b from table_a join table_b on table_a.id=table_b.id。当您配置querySql时，SQL ...
Oracle数据源
常见问题 实时同步Oracle、PolarDB、MySQL任务重复报错 主备同步数据恢复问题 主备同步问题指Oracle使用主从灾备，当主库报错切换至备库后，备库从主库不断地通过binlog恢复数据。由于主备数据同步存在一定的时间差，在网络延迟等特定情况...
使用实例时镜像相关问题
在使用ECS实例过程中，可能会遇到一些与镜像有关的问题或咨询，比如实例启动慢、系统负载高、如何编译内核等。本文介绍在使用ECS实例过程中遇到的镜像相关问题及解决方案。Windows镜像问题 如何手动更新Windows实例的virtio驱动？Windows ...
离线同步任务调优
同步任务整体速度慢可能出现在同步过程的各个阶段，本文以现象入手，为您提供各个阶段运行慢的解决方案，详情请参见：数据同步慢的场景及解决方案。在数据库性能限制的情况下，同步速度并非越快越好，考虑到速度过高可能对数据库造成过大的...
常见问题
任务运行常见问题 如果在迁移运行过程中出现问题，您可以先查看任务运行日志。单机部署：运行日志的文件路径为 logs/ossimport2.log。分布式部署：运行日志的文件路径为 logs/import.log。执行任何命令均报错 UnsupportedClassVersionError...
错误反馈
报错原因：AlgorithmTimeOut 表示检测超时，OCR图文识别比较耗时，使用同步调用接口时，系统默认设置了3秒的超时限制，如果图片中文字比较多，出现超时的概率也会比较大。解决方法：如果您业务场景的图片中文字比较多，建议您调用异步OCR...
RDS MySQL只读实例同步延迟原因与处理
延迟会导致只读实例与主实例的数据出现不一致，从而导致业务出现问题。另外，延迟也有可能引起日志堆积，导致只读实例空间被迅速消耗。说明 若主实例正产生大量的日志，有可能会使只读实例被锁定。日志复制延迟是通过 show slave status \G...
RDS MySQL只读实例同步延迟原因与处理
延迟会导致只读实例与主实例的数据出现不一致，从而导致业务出现问题。另外，延迟也有可能引起日志堆积，导致只读实例空间被迅速消耗。说明 若主实例正产生大量的日志，有可能会使只读实例被锁定。日志复制延迟是通过 show slave status \G...
离线同步日志分析
当任务长时间处于等待数据集成任务执行资源的状态时，可能是其他任务运行占用该资源组上的资源导致当前任务无资源执行而处于等待状态，您可以通过以下方案解决此类问题：待占用该数据集成资源组的任务（即运行在该资源组上的任务）执行成功...
PostgreSQL数据源
当配置该项后，数据同步系统会忽略tables、columns和splitPk配置项，直接使用该配置的内容筛选数据。例如需要进行多表JOIN后同步数据，使用 select a,b from table_a join table_b on table_a.id=table_b.id。当您配置 querySql 时，...
离线同步并发和限流之间的关系
问题二：为什么数据同步解决方案中的离线全量任务跑的慢，长时间任务处于Submit状态？数据源连接数限制功能，是指：目标端写入并发数：在实时数据同步任务内，向目标端写入数据的最大线程数。需要根据资源组大小和目标端实际规模合理设置。...
数据集成侧同步任务配置
完成数据源、网络、资源的准备配置后，您可以根据同步场景选择同步解决方案，创建并执行同步任务，将源端数据同步至目标端。本文为您介绍同步任务的通用配置流程，不同的同步方案配置流程可能存在差异，对应方案配置详情请以界面为准。前提...
5、如何做好迭代跟进？
跟进团队缺陷解决进展 每日站会时，在同步完需求的进展和问题后，需要抽 1-2 分钟时间查看一下缺陷解决情况，在云效项目协作Projex 的缺陷管理中，可以查看到遗留缺陷情况，并可根据诉求配置不同的查看视图。如下图，可以按照负责人分组...
PolarDB数据源配置
可能会发生实时服务同步出现问题。【少做账号权限变更】账号变更会带来当前实时任务的不能正常消费。同时新版本创建也会受影响。若变更账号密码，需要删除实例重新接入库。常见问题 如果配置PolarDB数据源后，索引重建出现卡住的现象，请在...
PolarDB数据源配置
可能会发生实时服务同步出现问题。【少做账号权限变更】账号变更会带来当前实时任务的不能正常消费。同时新版本创建也会受影响。若变更账号密码，需要删除实例重新接入库。常见问题 如果配置PolarDB数据源后，索引重建出现卡住的现象，请在...
全增量实时同步至Hologres
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数，即同一时间内，当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
离线同步数据质量排查
环境信息排查 问题 解决方案 查询了错误或不完整的数据源、表、或者分区等。DataWorks标准项目分为开发数据源、生产数据源，在开发环境运行任务使用开发数据源，在生产环境运行任务使用生产数据源，再对数据数量和内容比对时，需要确认下...
RDS数据源配置
可能会发生实时服务同步出现问题。【少做账号权限变更】当前OpenSearch实时任务也是MySQL的客户端。账号变更会带来当前实时任务的不能正常消费。同时新版本创建也会受影响。若变更账号密码，需要删除实例重新接入库。OpenSearch需要用户RDS...
RDS数据源配置
可能会发生实时服务同步出现问题。【少做账号权限变更】当前OpenSearch实时任务也是MySQL的客户端。账号变更会带来当前实时任务的不能正常消费。同时新版本创建也会受影响。若变更账号密码，需要删除实例重新接入库。OpenSearch需要用户RDS...
离线同步常见问题
读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少，但是任务出现长时间不读取数据也不结束，一直...
离线同步能力说明
说明 脏数据是对于业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中...
T+1多库合并建仓
系统默认的数据同步时间是00:30，您可以根据业务规律，将数据同步时间设置在业务低峰期，以免同步过程中可能对业务造成的影响。表名生成规则 设置DLA建仓时，RDS表在数仓中的映射表名。映射表名将通过以下两种规则自动生成：...
常见问题
本文介绍在使用ossutil时可能出现的问题及处理方法。说明 本文各命令行示例均基于Linux 64位系统，其他系统请将命令开头的./ossutil64 替换成对应的Binary名称。详情请参见 命令行工具ossutil命令参考。低频存储或标准存储的文件是否支持...
导入与导出
解决方法：非整库同步：建议重新同步这张表（即先从同步对象中去掉，然后删除目标库的表，再把这张表加入到同步对象中），DTS会重新进行包括schema拉取的全量同步，这样会跳过此类型的DDL。整库同步：在AnalyticDB MySQL中新建一张表，表名...
任务运行诊断
常见的同步任务执行问题如下：数据同步日志长时间打印WAIT 若数据同步日志长时间打印WAIT，表示DataWorks的调度系统已将同步任务下发，由于当前任务所使用的同步资源组剩余资源无法支持当前任务执行，正在等待其他任务执行完成释放资源。...
文档修订记录
任务调度属性配置概述 2023年2月更新记录 时间 特性 类别 描述 产品文档 2023.2.28 新增功能 数据治理中心 DataWorks支持您根据业务需要，将 治理工作台>治理项问题 页面待解决的治理项问题以通知的形式，通过系统提示、邮件、钉钉群消息等...
- 产品推荐
- 这些文档可能帮助您