下拉框选择器
图表样式 下拉框选择器是控件组件的一种，可以作为下拉框表单在可视化应用中使用，将用户选择的数据提交到后端进行处理或者通过交互配置，在其他组件上显示用户选择的内容。配置面板 搜索配置：单击 配置 面板右上角的 搜索配置，可在 搜索...
下拉框选择器
图表样式 下拉框选择器是控件组件的一种，可以作为下拉框表单在可视化应用中使用，将用户选择的数据提交到后端进行处理或者通过交互配置，在其他组件上显示用户选择的内容。样式面板 搜索配置：单击 样式 面板右上角的搜索配置项图标，可在...
新建 SQL 文件回放任务
选择 使用备份数据进行数据初始化 后，将创建一个新的实例用于备份恢复。配置详情请参见下方表格。租户 请在下拉列表中选择相应的租户。说明 选择 基准数据迁移 为 已完成数据迁移 时，才会显示该参数。选择 使用备份数据进行数据初始化 后...
补数据
节点使用的调度参数会根据补数据选择的业务时间自动替换为对应的值。将MySQL增量数据写入MaxCompute对应的时间分区中的示例如下。为什么小时分钟任务补数据选择了并行但实际不生效？问题现象 小时分钟任务补数据选择了并行但实际不生效。...
新建完整性能评估任务
使用备份数据进行数据初始化 选择该参数后，将创建一个新的实例用于备份恢复。配置详情请参见下方表格。租户 选择 基准数据迁移 为 已完成数据迁移 时，才会显示该参数。选择 使用备份数据进行数据初始化 后，您需要配置下述参数。重要 ...
发布服务
直接数据选择：选择数据类型、数据格式、云计算资源类型、云计算资源、目录or文件，单击 下一步。在 设置参数 向导页，选择 发布的服务类型、样式表、坐标系、归属应用、服务资源组，操作完成后单击 下一步。在 发布完成 的向导页，确认...
MySQL节点
在 选择数据源 下拉框，选择进行数据开发需要使用的目标数据源。如果下拉列表中没有需要的数据源，请单击右侧的 新建数据源，在 数据源管理 页面新建，详情请参见 配置MySQL数据源。说明 标准模式工作空间下，此处仅下拉展示已配置开发环境...
数据上传
本文为您介绍如何使用数据上传功能上传数据。使用限制 数据来源限制：仅支持上传 本地文件、DataWorks数据分析的电子表格、阿里云对象存储OSS 的数据。本地文件：支持 CSV、XLSX 格式，CSV 文件最大支持上传数据的数据量为5GB，XLSX 文件...
执行补数据并查看补数据实例（旧版）
代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码有关。本文为您介绍旧版补数据如何执行补数据操作并管理补数据实例。背景...
新建数据源
您可以通过新建数据源，供数据同步时使用。本文介绍如何新建数据源。背景信息 数据同步支持关系型数据库、文件、消息队列等类型数据源的配置。操作步骤 登录 数据资源平台控制台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
新建数据源
您可以通过新建数据源，供数据同步时使用。本文介绍如何新建数据源。背景信息 数据同步支持关系型数据库、文件、消息队列等类型数据源的配置。操作步骤 登录企业数据智能平台。在页面左上角，单击 图标，选择 协同。在顶部菜单栏，单击 ...
执行补数据并查看补数据实例（新版）
代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码有关。本文为您介绍新版补数据如何执行补数据操作并管理补数据实例。背景...
配置数据源
使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
MySQL分库分表同步至MaxCompute
您需要将数据库添加至DataWorks上，以便在同步任务配置时，可通过选择数据源名称来控制同步读取和写入的数据库。详情请参见 配置MySQL数据源、配置MaxCompute数据源。说明 数据源相关能力介绍详情请参见：数据源概述。已购买合适规格的独享...
添加宜搭数据源
本文为您介绍在DataV中添加和使用宜搭数据源的方法，以及相关参数配置说明。前提条件 已通过钉钉登录 宜搭控制台 创建一个宜搭应用数据表单。新建表单详情请参见 新建宜搭数据表单。背景信息 宜搭数据源内数据的调用权限使用最小可用原则。...
新建 Kafka 数据源
使用限制 数据传输仅支持 Kafka 数据源作为数据同步的目标端。背景信息 数据传输的安全问题，贯穿服务连通性验证、链路创建和数据传输过程。基于 Kafka 服务提供的安全体系，数据传输在数据加密和用户认证上均有一定的支持，以满足绝大部分...
使用DMS和DG管理本地或第三方云数据库
阿里云数据库网关DG（Database Gateway）支持在不暴露公网IP的前提下，将本地自建或第三方云厂商的数据库与阿里云服务连接起来，避免使用公网IP连接的安全风险。您可以通过数据库网关将本地或第三方云数据库录入DMS进行管理。背景信息 将...
导入数据
使用场景 表数据迁移 表数据备份 表数据分析 前提条件 数据库类型如下：数据库类型 关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB MySQL版、其他来源MySQL。SQL Server：RDS SQL Server、...
数据源概述
说明 数据同步基于数据源控制任务读写端数据库，您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库或数据仓库的相关信息，以便在同步过程中，可通过选择数据源名称来控制同步读取和写入的数据库或数据仓库。数据源...
采集数据
本文为您介绍如何新建OSS和RDS数据源来访问本教程所提供的用户信息与网站日志数据，配置数据同步链路至私有OSS数据源，并通过EMR Hive节点建表去查询同步后的数据，完成数据同步的操作过程。前提条件 开始本文的操作前，请准备好需要使用的...
时间选择器
说明 如果您的数据源类型为MySQL或其他类型的数据库，并且需要使用时间选择器组件展示时间类型（DateTime、Date等）的字段，可在DataV的数据源配置中使用SQL语句，将时间类型转换为字符串类型。selectRange 设置可选择范围区间。...
管理数据库资产
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
使用MaxCompute控制台（离线）
指定待上传数据 选择Bucket 数据来源 指定为 阿里云对象存储OSS 时，选择目标文件所在的OSS Bucket路径。选择文件 选择目标CSV文件或XLSX文件。是否剔除脏数据 根据需要选择在上传文件数据时，是否剔除待上传文件中与MaxCompute目标表的列...
采集数据
本教程以MySQL中的用户基本信息（ods_user_info_d）表及OSS中的网站访问日志数据（user_log.txt）文件，通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例，为您介绍如何通过DataWorks数据集成实现异构...
元数据管理
元数据管理是构建数据湖重要一环，通过有效集中式的元数据管理，可以提升数据资产价值。您可以使用该功能管理元数据库和元数据表。创建元数据库 登录 数据湖管理控制台，选择 元数据 目录下的 元数据管理。单击 新建数据库。配置元数据库...
周期任务补数据
节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何对周期任务进行补数据。应用场景 补数据功能多用于以下应用场景：新开发的周期任务，只能从第二天开始调度。如果您需要马上查看历史分区数据，可以执行...
添加DataWorks数据服务数据源
登录 DataWorks数据服务控制台，参见 生成API概述，使用数据服务生成API。登录 DataV控制台。在 工作台 页面中，将鼠标移动至需要编辑的数据看板上，单击 编辑。重要 如果您的 工作台 页面内还没有创建任何数据看板，请参见 使用模板创建PC...
周期任务补数据
节点使用的调度参数会根据补数据选择的业务时间自动替换成对应的值。本文为您介绍如何对周期任务进行补数据。应用场景 补数据功能多用于以下应用场景：新开发的周期任务，只能从第二天开始调度。如果您需要马上查看历史分区数据，可以执行...
配置TiDB输出组件
同步其他数据源的数据至TiDB数据源的场景中，完成源数据源的信息配置后，需要配置TiDB输出组件写入数据的目标数据源。本文为您介绍如何配置TiDB输出组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输出组件...
新建 MySQL 数据源
共有参数 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，长度限制为 32 个字符。是否跨阿里云主账号 数据传输支持对不同阿里云主账号下的实例配置数据迁移或数据同步项目，实现跨阿里云主账号的数据迁移或数据同步。您...
配置同步任务
数据同步支持使用 copy from 将数据加载到表中，并且在遇到冲突时会使用新数据覆盖旧数据，建议您在遇到性能问题时再尝试使用该策略。冲突策略 当AnalyticDB for PostgreSQL数据源的加载策略选择 Copy模式 时，需要配置 冲突解决策略，包括...
从自建Redis迁移至阿里云Redis
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建Redis迁移至阿里云Redis实例。DTS支持全量数据迁移以及增量数据迁移，同时使用这两种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建Redis数据库的迁移...
配置TiDB输出组件
同步其他数据源的数据至TiDB数据源的场景中，完成源数据源的信息配置后，需要配置TiDB输出组件写入数据的目标数据源。本文为您介绍如何配置TiDB输出组件。前提条件 已创建TiDB数据源，如何创建，请参见 创建TiDB数据源。进行TiDB输出组件...
新建 Oracle 数据源
共有参数 数据源标识 建议使用中文、数字和字母的组合。名称中不能包含空格，长度限制为 32 个字符。是否跨阿里云主账号 数据传输支持对不同阿里云主账号下的实例配置数据迁移或数据同步项目，实现跨阿里云主账号的数据迁移或数据同步。您...
通过上传本地数据新建数据集
上传本地文件的方式导入业务所需的数据集，以便在模型画布中编辑业务模型时使用导入的数据集。本文介绍如何通过上传本地数据新建数据集。前提条件 已创建云计算资源作为存储数据源，具体操作，请参见 新建计算资源。已准备好待上传的数据表...
配置OpenGauss输出组件
同步其他数据源的数据至OpenGauss数据源的场景中，完成源数据源的信息配置后，需要配置OpenGauss输出组件写入数据的目标数据源。本文为您介绍如何配置OpenGauss输出组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
配置OpenGauss输出组件
同步其他数据源的数据至OpenGauss数据源的场景中，完成源数据源的信息配置后，需要配置OpenGauss输出组件写入数据的目标数据源。本文为您介绍如何配置OpenGauss输出组件。前提条件 已创建OpenGauss数据源，如何创建，请参见 创建OpenGauss...
使用DMS和DG管理本地或他云数据库
阿里云数据库网关DG（Database Gateway）支持在不暴露公网IP的前提下，将本地自建或第三方云厂商的数据库与阿里云服务连接起来，避免使用公网IP连接的安全风险。您可以通过数据库网关将本地或第三方云数据库录入DMS进行管理。背景信息 将...
配置同步任务
数据同步支持使用 copy from 将数据加载到表中，并且在遇到冲突时会使用新数据覆盖旧数据，建议您在遇到性能问题时再尝试使用该策略。冲突策略 当AnalyticDB for PostgreSQL数据源的加载策略选择 Copy模式 时，需要配置 冲突解决策略，包括...
PolarDB-X 1.0迁移至云原生数据仓库 AnalyticDB ...
源库信息 选择已有的DMS数据库实例（可选，如未创建可忽略此处选择，直接在下方配置数据库信息即可）您可以按实际需求，选择是否使用已有实例。如使用已有实例，下方数据库信息将自动填入，您无需重复输入。如不使用已有实例，您需要输入...
- 产品推荐
- 这些文档可能帮助您