什么是DataWorks
从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与数万名政务、央国企、金融、零售、互联网、能源、制造、工业等行业的客户携手，不断提升数据应用效率，助力产业数字化升级。产品架构 DataWorks十多年...
客户案例
新零售行业：大润发云上数据中台建设 客户架构如下。客户简介 为了快速数字化转型，拥抱新零售，大润发计划两年内将IT系统全面迁移到阿里云上，不再自建IDC。同时与阿里云合作启动数据中台项目，可以帮助大润发降低TCO的同时，更好的依托云...
功能简介
为了将业务人员从重复、无效的分析工作释放出来，并通过智能化的能力帮助业务管理者、运营、业务分析师等人员高效的从数据中发现规律和异常，实现知识的提取，需要提供智能、全面、精准的数据诊断和分析能力，自动洞察数据中的有效知识，...
常见问题概览
连接访问 打开SQLConsole页面时提示“未获取到数据库相关信息”的报错 MySQL中出现“Too many connections”报错 新增ECS自建数据库提示“因白名单问题无法连接数据库”账号或权限 如何在DMS控制台中查看数据库对应的DBA 在DMS控制台添加...
多账号统一管理
便于企业有效地执行数据安全管理任务，如自动发现敏感数据、数据分类分级、以及对潜在安全威胁的监测和报警。本文介绍如何使用多账号统一管理功能。使用须知 使用多账号统一管理功能的阿里云账号和被管理的阿里云账号必须同属于一个资源...
产品架构
整体架构如下：LindormTable 的数据持久化存储在LDFS中，表的数据通过自动Sharding分散到集群中的多台服务器上，并且每一个分区可以拥有1至N个副本，这N个副本拥有主、从两种角色，主从副本可以加载在不同的Zone，从而保障集群的高可用和强...
数据排名
数据排名是数据的大小进行排名，便于用户进行数据大小比较。数据分析中，您可以查看度量的排名，帮助您做决策。本文为您介绍如何设置数据排名。前提条件 您已创建仪表板，请参见 新建仪表板。您已选定目标数据集，并配置好图表字段。请参见...
结束数据迁移任务
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标集群所属地域。根据选择的迁移类型，选择执行下述步骤：...
修改数据库密码
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。根据实例类型，在左侧导航栏单击 数据迁移、数据同步 或 数据订阅。在页面顶部选择实例所属地域。找到目标实例，单击实例ID。根据...
UpdateFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。控制台中“重跑间隔”的时间单位为分钟，请在调用时注意转换时间。RerunMode String 否 ALL_ALLOWED 重跑属性。取值如下：ALL_...
CreateFile
该参数与 DataWorks控制台 中，数据开发任务的“调度配置>时间属性>出错自动重跑”的”重跑间隔“配置对应。控制台中“重跑间隔”的时间单位为分钟，请在调用时注意转换时间。RerunMode String 否 ALL_ALLOWED 重跑属性。取值如下：ALL_...
实施步骤
步骤七：为大屏中的国家销售额排名组件配置数据 选中 销售额国家排名 组件，在 数据 页面进行参数配置。数据源类型：选择数据库。数据源：选择步骤二中添加的DLA数据源（dla_hangzhou_tpch）。SQL：输入以下SQL，按国家销售额降序排序。...
查看数据迁移进度
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移任务所属的地域。在 数据迁移列表 页面，单击目标实例ID。根据...
调整全量迁移速率
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移任务所属的地域。在 数据迁移列表 页面，单击目标实例ID。在...
依赖服务计费说明
社区兼容版集群 依赖服务 支持功能 计费说明 ARMS 监控告警 监控：依赖于Prometheus监控，开通Prometheus监控服务后，您可以在 云数据库ClickHouse 控制台中免费查看15天的监控数据，超过15天自动清除。告警：依赖于ARMS告警管理服务，ARMS...
升级实例配置
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移 或 数据同步。在目标实例处单击 升级。选择链路规格并勾选 数据传输服务协议。说明 关于链路的规格...
数据保护伞入门
当一列非空数据中，满足上述识别条件的数据大于指定阈值时，则命中该规则，会将该数据识别为当前类型的敏感数据。本文示例阈值配置为50%，即当某列数据中，满足上述条件的数据超过50%时，则将其识别为敏感数据。配置完成后，单击 发布使用...
数据脱敏
项目管理员在 ODC 目标项目>敏感数据 中手动添加敏感列；如果通过自动扫描方式添加敏感列，需要先创建识别规则。用户在执行查看表数据、SQL 窗口查询、结果集导出、导出工单、数据库变更工单操作时，包含的敏感列输出为脱敏数据。前提条件 ...
通过整库迁移配置集成任务
字段分隔符处理：如数据中存在默认或自行配置的字段分隔符，可选择处理策略，防止数据写入错误。包括 保留、去除、替换为。行分隔符处理：如数据中存在换行符(\r、)，可选择处理策略，防止数据写入错误。包括 保留、去除、替换为。开发数据...
通过整库迁移配置集成任务
自动删除数据源中同名表：选中后Dataphin会先自动删除 数据源 中已经存在的，且与整库生成同名的表，再重新自动创建表。重要 如为项目数据源，则会同时删除生产与开发环境中的同名表，请谨慎操作。名称转化配置：非必选，名称转换配置可将...
配置RDS MySQL间的数据集成任务
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以单击右下角的 中单击，返回至旧版数据传输控制台。若您登录的是新版数据传输控制台，您可以单击右下角的，返回至旧版数据传输控制台。在左侧导航栏，单击 数据集成。在数据集成...
存储概览
数据湖构建DLF后续还将推出生命周期管理功能，帮助您对湖内数据进行自动归档。目前功能开发中。存储格式分布 统计表的存储格式分布情况。大小文件分布和排名 统计大小文件分布及排名情况，根据业务情况，针对小文件较多的表进行优化，提高...
从PolarDB-X同步至云原生数据仓库 AnalyticDB MySQL ...
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
PolarDB MySQL版间的单向同步
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步到Kafka
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
PolarDB MySQL同步至AnalyticDB for PostgreSQL
若源库待同步的数据中存在日期类型的数据 0000-00-00 00:00:00，则可能会导致任务失败。说明 DTS将该日期数据同步到目标库时会转换为 null。您可以临时将源库数据修改为 0001-01-01 00:00:00，或者将目标库对应字段设置为可空。费用说明 ...
PolarDB MySQL版间的单向同步
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步至云原生数据仓库 AnalyticDB ...
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步至RDS MySQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
PolarDB-X间的数据实时同步
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从ECS上的自建MySQL同步至PolarDB MySQL版
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步至云原生数据仓库AnalyticDB ...
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从RDS MySQL迁移至自建Kafka
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标集群所属地域。单击页面右上角的 创建迁移任务。配置...
从RDS MySQL同步至PolarDB MySQL版
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步到Kafka
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
从PolarDB MySQL版同步至云原生数据仓库AnalyticDB ...
若源库待同步的数据中存在日期类型的数据 0000-00-00 00:00:00，则可能会导致任务失败。说明 DTS将该日期数据同步到目标库时会转换为 null。您可以临时将源库数据修改为 0001-01-01 00:00:00，或者将目标库对应字段设置为可空。费用说明 ...
从自建MySQL迁移至PolarDB-X
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
从自建PostgreSQL全量迁移至RDS PostgreSQL
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务列表 页面顶部，选择迁移的目标实例所属地域。单击页面右上角的 创建迁移任务。配置...
从ECS上的自建MySQL同步至PolarDB MySQL版
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。在左侧导航栏，单击 数据同步。在 同步作业列表 页面顶部，选择同步的目标实例所属地域。定位至已购买的数据同步实例，单击 配置...
RDS MySQL修改字符集（平滑方案）
说明 若数据传输控制台自动跳转至数据管理DMS控制台，您可以在右下角的 中单击，返回至旧版数据传输控制台。若您登录的是新版数据传输控制台，您可以单击右下角的，返回至旧版数据传输控制台。在左侧导航栏，单击 数据迁移。在 迁移任务...
- 产品推荐
- 这些文档可能帮助您