创建GoldenDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
创建PolarDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
新建TDengine数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
创建SAP HANA数据源
配置数据源的基本信息。参数 描述 数据源名称 命名规则如下：只能包含中文、字母、数字、下划线（_）或中划线（-）。长度不能超过64字符。数据源描述 对数据源的简单描述。不得超过128个字符。数据源配置 选择需要配置的数据源：如果业务...
新建TDengine数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
解决方案
根据数据血缘关系和不同的创建方式，自动选择关联的数据资产，保证解决方案的完整性。同时，通过自动检测待生成的解决方案中是否存在异常（如表一致性、数据质量异常等），保证解决方案的一致性和可用性。对于需要在多项目部署的解决方案，...
配置MySQL输入
已配置数据同步资源组与数据库的网络连通，详情请参见 配置资源组与网络连通。使用限制 数据集成不支持同步MySQL只读库实例的数据。DataWorks的数据集成实时同步MySQL数据是基于实时订阅MySQL实现的，实时同步MySQL数据目前仅支持配置MySQL...
创建Impala数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
功能更新动态（2023年）
支持配置数据源编码，配置数据源编码后，可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的表。创建FTP数据源 创建Salesforce数据源 创建OSS数据源 安全设置 安全...
文档更新动态（2023年）
支持配置数据源编码，配置数据源编码后，可在Flink SQL任务中通过 数据源编码.table 或 数据源编码.schema.table 的格式引用MySQL、Hologres和MaxCompute数据源中的表。更新说明 创建FTP数据源 创建Salesforce数据源 创建OSS数据源 管理...
批量创建质量规则
Dataphin数据表、全域数据表 支持的规则模板为 完整性、唯一性、及时性、有效性、一致性、稳定性、自定义SQL。更多模板详情请参见 模板类型说明。完整性：包括 字段空值校验 和 字段空字符串校验。唯一性：包含 字段唯一性校验、字段分组...
批量创建质量规则
Dataphin数据表、全域数据表 支持的规则模板为 完整性、唯一性、及时性、有效性、一致性、稳定性、自定义SQL。更多模板详情请参见 模板类型说明。完整性：包括 字段空值校验 和 字段空字符串校验。唯一性：包含 字段唯一性校验、字段分组...
配置资产数据
单击 配置数据源，可在 设置数据源 页面修改数据源的类型和脚本，详情请参见 设置资产数据源。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器，可在 设置数据源 页面配置数据过滤器脚本，详情请参见 ...
创建TiDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
功能简介
根据数据血缘关系和不同的创建方式，自动选择关联的数据资产，保证解决方案的完整性。同时，通过自动检测待生成的解决方案中是否存在异常（如表一致性、数据质量异常等），保证解决方案的一致性和可用性。对于需要在多项目部署的解决方案，...
创建TiDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
配置VPC数据源
除了传统的数据库配置外，您还需要配置数据库的 VPC ID 和 实例ID。这两种ID都可以在阿里云控制台中获取。通过 RDS控制台 获取 VPC ID 和 实例ID。图 1.获取数据库实例ID 图 2.获取VPC ID 如果您的数据库安装在VPC内的ECS上，则需要配置该...
创建GoldenDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
使用场景
数据清洗与加工 DMS任务编排可以用于数据清洗和加工任务的编排和执行，如数据清洗、数据匹配、数据合并、数据转换等，确保数据的准确性和完整性。数据集成与汇总 使用DMS任务编排集成和汇总不同数据源的数据，进行数据聚合和分析，生成报表...
配置组件数据
单击画布中 转盘抽奖 组件，在画布右侧配置面板的 数据 面板中，单击 配置数据源。在 设置数据源 面板中，选中 静态数据 数据源，并在下方的数据配置区域内，按照您团队所需的奖品内容，自定义修改模板中已有的数据，或直接粘贴准备好的...
配置组件数据
单击画布中 转盘抽奖 组件，在画布右侧配置面板的 数据 面板中，单击 配置数据源。在 设置数据源 面板中，选中 静态数据 数据源，并在下方的数据配置区域内，按照您团队所需的奖品内容，自定义修改模板中已有的数据，或直接粘贴准备好的...
创建Impala数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
DataWorks产品安全能力介绍
数据质量规则：支持管理员配置数据质量规则并关联生产任务，确保每日产出的结果数据无缺失、无污染、准确有效并可用于支撑业务决策，保障数据的完整性（Integrity）与可用性（Availability）。智能监控规则：支持管理员为重要的任务优先...
栅格瓦片
数据 该组件不需要配置数据。蓝图编辑器交互配置 在当前场景编辑器页面，单击左侧图层列表中 栅格瓦片 右侧的 图标。鼠标移动到页面左上角的 返回 图标，单击弹出对话框中的 蓝图编辑器。在蓝图编辑器配置页面，单击导入节点栏内的 栅格...
数据保护伞入门
操作流程 步骤一：配置数据分类分级 用于对您当前的数据按照数据价值、内容敏感程度、影响和分发范围进行敏感级别划分。不同敏感级别的数据管控原则和数据开发要求存在差异。步骤二：配置敏感数据识别规则 根据数据的来源、用途，定义数据...
道路
可配置选择L1和L2两种数据精度，本文以L2精度为例介绍道路的样式和数据配置，包括道路的阴影、环境贴图强度系数和面类型等样式配置。本文介绍道路配置项的含义。在场景编辑器左侧图层列表中，单击 道路 图层，进入配置面板配置 道路 图层的...
道路
可配置选择L1和L2两种数据精度，本文分别从L1和L2两种精度介绍道路的样式和数据配置，包括道路的阴影、环境贴图强度系数和面类型等样式配置。本文介绍道路配置项的含义。在场景编辑器左侧图层列表中，单击 道路 图层，进入配置面板配置 ...
道路
可配置选择L1和L2两种数据精度，本文分别从L1和L2两种精度介绍道路的样式和数据配置，包括道路的阴影、环境贴图强度系数和面类型等样式配置。本文介绍道路配置项的含义。在场景编辑器左侧图层列表中，单击 道路 图层，进入配置面板配置 ...
配置离线数据集成节点
源表配置 数据过滤 填写WHERE过滤语句。支持使用变量。推荐分片字段 默认取值为 自动。最大并发数量 选择最大并发数量，默认取值为4。说明 DMS 限制单个租户的并发Spark任务数量，超过4后，任务将会排队执行。目标表配置 导入数据前置行为 ...
新建ArgoDB数据源
数据源编码 配置数据源编码后，您可以在Flink_SQL任务中通过 数据源编码.表名称 或 数据源编码.schema.表名称 的格式引用数据源中的表；如果需要根据所处环境自动访问对应环境的数据源，请通过${数据源编码}.table 或${数据源编码}.schema....
区域热力层（v1.x版本）
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
BigQuery数据源
BigQuery数据源为您提供读取BigQuery的功能，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍DataWorks的BigQuery数据同步能力支持情况。支持的版本及地域 BigQuery使用的SDK版本是 google-cloud-bigquery 2.29.0，...
场景管理器
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
通过整库迁移配置集成任务
适用于数据量较小的情况，可以提高同步数据的准确性和完整性。copy：数据通过文件形式同步。适用于数据量较大的情况，可以提高同步速度。配置数据同步。同步来源为 MySQL、Oracle、Microsoft SQL Server、OceanBase、IBM DB2、MaxCompute、...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
配置Vertica输入组件
同步Vertica数据源的数据至其他数据源的场景中，您需要先配置Vertica输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Vertica输入组件。在开始执行操作前，请确认您已完成以下操作：已创建Vertica数据源。...
修改组件数据
以模板画布中 轮播列表 组件为例，单击选中该组件后，在画布右侧配置面板的 数据 页签中，单击 配置数据源。在 设置数据源 页面中，选择 数据源 类型为 静态数据。在下方的数据配置区域内，按照您的需求修改模板已有的数据，或粘贴准备好的...
配置Teradata输入组件
同步Teradata数据源的数据至其他数据源的场景中，您需要先配置Teradata输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Teradata输入组件。使用限制 不支持读取Teradata数据库的视图。前提条件 在开始执行...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
配置OceanBase输入组件
同步OceanBase数据源的数据至其他数据源的场景中，您需要先配置OceanBase输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置OceanBase输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建...
- 产品推荐
- 这些文档可能帮助您