数据同步
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
资源组说明
数据同步Worker：用于执行数据同步任务，包括离线同时、实时同步。空间同步Worker：用于空间数据同步。数据服务资源组：按数据API的定义，连接指定数据源，对外提供数据API。自定义执行器：支持用户按执行器规范，扩展自己的执行器。系统...
功能简介
支持在离线数据同步、实时数据同步任务中引用已添加的数据模板，根据数据模板定义的数据结构执行数据同步任务。离线数据同步 支持单表离线任务、批量离线任务的新建。支持自定义选择已经注册的数据源端数据和目标端，支持多种常见离线同步...
资源组说明
数据同步Worker：用于执行数据同步任务，包括离线同时、实时同步。空间同步Worker：用于空间数据同步。数据服务资源组：按数据API的定义，连接指定数据源，对外提供数据API。自定义执行器：支持用户按执行器规范，扩展自己的执行器。系统...
离线同步日志分析
以MySQL Writer为例，若您的任务配置了 PreSQL，即存在执行数据同步任务之前先执行的SQL语句时，该SQL将在此阶段下发至数据库执行。以MySQL Reader为例，若您的任务配置 querySql 或 数据过滤（where），这些SQL将在此阶段下发至数据库执行...
数据源开发和生产环境隔离
例如出现DataStudio执行成功，生产调度时执行失败，或DataStudio执行与生产调度时执行数据量不一致等问题时，您可对比开发环境执行成功的日志与生产环境的报错日志进行比对排查。由于任务最终将发布生产环境执行，若数据源开发环境与生产...
数据归档至AnalyticDB PostgreSQL版
工单审批通过后，系统自动执行数据归档任务。若任务执行失败，您可在工单的执行区域，单击操作列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击 断点重试，尝试重新...
数据归档至RDS MySQL
工单审批通过后，系统自动执行数据归档任务，等待归档任务执行完成。若任务执行失败，您可在工单的执行区域，单击操作列下的详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击...
数据归档至PolarDB MySQL版
工单审批通过后，系统自动执行数据归档任务，等待归档任务执行完成。若任务执行失败，您可在工单的执行区域，单击操作列下的详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击...
普通数据变更
建议您在测试环境执行数据变更也通过工单进行管理。通过工单进行变更会有数据备份、行数校验等保障，如果操作不符合预期可以快速恢复。说明 如果担心审批工单影响研发效率，可以设置无审批。具体操作，请参见 SQL变更。如果已配置 逻辑库、...
数据归档至用户OSS
工单审批通过后，自动执行数据归档任务。说明 数据归档功能将以 0时区 进行数据归档与后置行为（与数据库实际时区无关）。可选：数据归档成功且确认无误后，您可以删除已归档的源表数据并优化源表空间。清理源表已归档数据。如果您开启了后...
DataWorks On CDP/CDH使用说明
类别 描述 相关文档 数据同步环境准备 基于集群的Hive组件执行数据同步任务前，需先将该组件创建为相应的 DataWorks 数据源。支持的数据源及同步方案 数据开发、数据分析 环境准备 基于DataWorks进行计算引擎任务周期性调度前，您需先将...
DML无锁变更
无锁数据变更的相关API如下：CreateFreeLockCorrectOrder-创建无锁变更工单 ModifyDataCorrectExecSQL-修改数据变更工单SQL脚本 PauseDataCorrectSQLJob-暂停执行数据变更工单SQL任务 GetDataCorrectTaskDetail-获取工单任务详情 ...
数据归档至AnalyticDB MySQL 3.0
工单审批通过后，系统自动执行数据归档任务，等待归档任务执行完成。若任务执行失败，您可在工单的执行区域，单击 操作 列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以...
同数据库归档
工单审批通过后，系统自动执行数据归档任务，等待归档任务执行完成。若任务执行失败，您可在工单的执行区域，单击 操作 列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以...
数据归档至Lindorm
工单审批通过后，系统自动执行数据归档任务。若任务执行失败，您可在工单的执行区域，单击操作列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击 断点重试，尝试重新...
数据归档至Lindorm
工单审批通过后，系统自动执行数据归档任务。若任务执行失败，您可在工单的执行区域，单击操作列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击 断点重试，尝试重新...
数据归档至专属存储
工单审批通过后，系统自动执行数据归档任务，等待归档任务执行完成。若任务执行失败，您可在工单的执行区域，单击 操作 列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以...
资源规划和配置
API调用流程为：用户发起API调用请求，调用请求会先被API网关接收，再被转发至数据服务的服务器，最后被转发至目标数据源中执行数据查询。资源组分类 资源组可分为公共资源组和独享资源组两类。公共资源组：DataWorks提供的、所有用户可...
使用DMS进行数据归档
工单审批通过后，系统自动执行数据归档任务。若任务执行失败，您可在工单的执行区域，单击操作列下的 详情，查看归档任务日志，找出任务执行失败的原因。若是由于网络或数据库连接失败等偶然发生的问题，您也可以单击 断点重试，尝试重新...
通过控制台自动导入迁移源
重要 安装服务器迁移中心客户端后可执行服务器迁移、操作系统迁移、跨可用区迁移和桌面迁移，否则只能执行跨可用区迁移。导入方式 选中 控制台导入。地域 在下拉列表中选择待迁移服务器所在的地域。实例 选择指定地域下待迁移的阿里云ECS...
共享自定义镜像
自定义镜像支持共享到ECS。当轻量应用服务器的配置不能再满足您的业务需要、或者您期望使用云服务器ECS部署业务时，您可以通过共享镜像将业务从轻量应用服务器转移至云服务器ECS。...具体操作，请参见 轻量应用服务器数据迁移至ECS实例。
复制自定义镜像
您可以将某一地域下的自定义镜像复制到其他地域，使用复制后的镜像创建轻量应用服务器，实现轻量应用服务器之间的跨地域无缝迁移。同时可搭配共享自定义镜像功能，将复制后的镜像共享至ECS并通过镜像创建ECS，实现轻量应用服务器跨地域无缝...
与云服务器ECS对比
与云服务器ECS相比，轻量应用服务器使用门槛较低，配置简便，能让您快速上手并部署简单的应用或网站，更适合个人开发者、学生等用户。本文介绍轻量应用服务器与云服务器ECS的特点和区别。产品对比 轻量应用服务器与 云服务器ECS 的产品对比...
评估迁移时间与测试传输速度
迁移周期时长与待迁移服务器的数量和实际数据量成正比，建议您根据实际迁移测试演练进行评估。本文主要介绍迁移过程中这一阶段所需时间的评估方式和传输速度的测试方法。背景信息 在SMC迁移过程中，系统会先在您账号下创建一台临时中转实例...
什么是RPA
产品介绍 阿里云RPA产品是一款新型工作流程自动化办公机器人软件，通过模拟人工操作进行自动流程执行处理。它可以将办公人员从每日的重复工作中解放出来，提高生产效率。具体而言，阿里云RPA是基于软件机器人和人工智能（AI，Artificial ...
DML操作常见问题
问题类别 常见问题 插入或更新数据 执行INSERT操作过程中出现错误，会损坏原有数据吗？执行INSERT INTO或INSERT OVERWRITE操作时，提示Table xxx has n columns，but query has m columns，如何解决？执行INSERT INTO或INSERT OVERWRITE...
配置DM（达梦）输出组件
配置DM（达梦）输出组件，可以将外部数据库中读取的数据写入到DM（达梦），或从大数据平台对接的存储系统中将数据复制推送至DM（达梦），进行数据整合和再加工。本文为您介绍如何配置DM（达梦）输出组件。前提条件 已创建DM（达梦）数据源...
配置MySQL输出组件
比如为了满足服务的持续可用性，当前步骤写数据执行前先创建目标表Target_A，执行写入到目标表Target_A，当前步骤写数据执行完成后，对数据库中持续提供服务的表Service_B重命名成Temp_C，然后将表Target_A重命名为Service_B，最后删除Temp...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、字段级别和自定义的监控模板。数据质量帮助您第一时间感知到源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，自动拦截问题任务，有效阻断脏数据向下游蔓延...
跨阿里云账号迁移MongoDB实例
建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨...
跨阿里云账号迁移MongoDB实例
建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨...
从MongoDB单节点实例迁移至副本集或分片集群实例
建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨...
系统角色
DBA 管理和运维数据库实例资源、数据库研发规范、数据库研发流程、任务执行等。可以是企业的DBA、运维等。在普通用户基础上，可使用除 用户管理 以外的系统管理功能。管理员 当前租户的主账号默认为管理员，且不可取消。可设置子账号或其他...
概述
用户使用流程 数据湖构建将帮助您快速简洁抽取源数据到统一数据湖的服务，用户使用流程如下：开通公测流程后，登录阿里云管理控制台，选择 数据湖构建，进入 数据湖管理控制台。参见 数据源管理 章节，创建数据源，选择希望导入到数据湖的...
数据源和项目协同
审批通过后，执行数据库变更任务。数据源管理 在数据源列表中查看、编辑和移除创建的数据源。查看数据源 数据源列表中，支持如下操作：操作项 说明 数据源名 显示数据源的名称、类型、实例 ID、租户 ID 和数据库用户名信息。单击数据源名称...
Oracle数据源
如果数据库中包含不支持的字符编码，请进行修改后再执行数据同步。准备工作5：检查数据库表的数据类型 您可以使用查看表的SQL相关语句（SELECT）查询数据库表的数据类型。示例查看 'tablename' 表数据类型的语句如下。select COLUMN_NAME,...
迁移MongoDB实例至其他地域
建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨...
迁移MongoDB实例至其他地域
建议您在执行数据迁移前谨慎评估，在业务低峰期执行数据迁移。单节点实例不支持使用DTS执行增量数据迁移，为保障数据一致性，全量数据迁移期间请勿在源实例中写入新的数据。MongoDB实例支持的版本与存储引擎请参见 版本及存储引擎，如需跨...
应用运维
区域 ④：服务器分组区，用于展示服务器分组、服务器执行状态、执行详情，并且可以进行加锁、解锁等操作。详情：执行完成、执行中、执行失败的分组，用户可以查看该分组中应用执行的详情，包括进度、状态、执行时间、失败原因等重要信息。...
- 产品推荐
- 这些文档可能帮助您