按线上API关联
系统自动选中API的归属应用、和API关联的物理表、和API关联物理表有产出关系的场景、场景下包含的所有场景节点、场景下输出的物理表，以及场景节点包含的所有逻辑表，以及场景节点包含的所有逻辑表以及数据标准、数据源和全局配置。...
修改组件数据
说明 添加数据时的字段名要和系统设置保持一致。数据配置完成后，您可以在 设置数据源 页面单击 数据响应结果 的 图标刷新数据响应结果。数据响应成功后，在 数据 页签会显示 配置完成。使用同样的方式，配置画布中所有组件的数据。
管理数据库资产
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
修改组件数据
说明 添加数据时的字段名要和系统设置保持一致。数据配置完成后，您可以在 设置数据源 页面单击 数据响应结果 的 图标刷新数据响应结果。数据响应成功后，在 数据 页签会显示 配置完成。使用同样的方式，配置画布中所有组件的数据。...
入湖基础操作
关系数据库实时入湖：可以实现RDS MySQL或PolarDB数据库表数据增量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据抽取binlog的方式将数据库表数据实时同步回放到数据湖中。待同步的数据表需确认包含...
FineBI
常见问题 初始化时没有选择外接数据库，初始化后想配置外接数据库 处理方法：进入数据决策系统，单击 管理系统>系统管理，在 常规 页签，单击 待配置。输入实际数据库相应的信息，配置外接数据库。配置完成后，单击 启用新数据库。配置外接...
代码智能推荐
该功能可以利用AI模型帮助用户生成组件数据处理的代码。用户可以在对话框中描述数据处理的需求，并支持对推荐的代码内容进行修改。前提条件 已登录DataV控制台 已进入画布编辑器页面 操作步骤 在当前数据看板中随机添加一个组件（例如：...
修改名单抽奖数据
说明 添加数据时的字段名要和系统设置保持一致。数据配置完成后，您可以在 设置数据源 页面单击 数据响应结果 的 图标刷新数据响应结果。数据响应成功后，在 数据 页签会显示 配置完成。您还可以在组件 设置数据源 页面中，选择 数据源 ...
修改名单抽奖数据
说明 添加数据时的字段名要和系统设置保持一致。数据配置完成后，您可以在 设置数据源 页面单击 数据响应结果 的 图标刷新数据响应结果。数据响应成功后，在 数据 页签会显示 配置完成。您还可以在组件 设置数据源 页面中，选择 数据源 ...
使用场景
实时数据处理 DMS任务编排可以设置定时任务，实现对实时数据的处理和分析。业务流程自动化 结合DMS任务编排的调度和依赖管理功能，可以实现业务流程的自动化处理，提高工作效率和数据处理的准确性。数据治理与数据管控 DMS任务编排提供了...
适配组件数据
数据看板创建完成后，您可以根据实际需要通过以下方式修改组件数据内容...说明 添加数据时的字段名要和系统设置保持一致。数据配置完成后，您可以单击 数据响应结果 的 图标刷新数据响应结果。使用同样的方式，配置数据看板中所有组件的数据。
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至Hologres。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
配置HDFS输入组件
同步HDFS数据源的数据至其他数据源的场景中，您需要先配置HDFS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置HDFS输入组件。前提条件 已创建HDFS数据源，如何创建，请参见 创建HDFS数据源。进行HDFS输入组件属性...
导入结构和数据
导入对象信息 显示该任务中您选择的对象在导入数据时的完成情况，包括对象名称、对象类型、实际处理数量和数据处理状态等信息。任务流程 在目标任务的任务详情面板中，单击任务流程标签查看发起任务、审批和执行状态等信息。任务日志 在...
配置OSS输入组件
同步OSS数据源的数据至其他数据源的场景中，您需要先配置OSS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置OSS输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建OSS数据源。具体操作，请...
配置OSS输入组件
同步OSS数据源的数据至其他数据源的场景中，您需要先配置OSS输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置OSS输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建OSS数据源。具体操作，请...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至 AnalyticDB for MySQL。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，...
配置并管理实时同步任务
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，同步数据至MaxCompute。本文为您介绍如何创建数据实时同步任务，并在创建完成后查看任务运行情况。前提条件 已完成数据源配置。您需要在数据集成同步任务配置前，配置好您需要...
管理Agent
修改Agent配置 数据库审计支持设置Agent的运行模式和数据审计抓包规则，比如CPU亲和性、最大CPU使用率、最大内存使用量、抓包网口等，您可以参考以下步骤修改Agent配置。登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧...
系统函数分类
数据探索自身预置了诸多函数，用于常见的数据处理需求。这些预置的系统函数具有跨引擎的特点，在离线、实时、在线3种模型的不同引擎中具有相同的行为和使用方式。本文为您介绍数据探索提供的系统函数类型及函数使用相关说明。函数分类 数据...
DataStudio侧实时同步任务配置
完成数据源、网络、资源的准备配置后，您可创建实时同步节点，将多种输入及输出数据源搭配组成同步链路，进行单表或整库数据的实时增量同步。本文为您介绍如何创建单表或整库增量数据实时同步任务，并在创建完成后查看任务运行情况。前提...
Trino概述
支持丰富的数据源：Hive Cassandra Kafka MongoDB MySQL PostgreSQL SQL Server Redis Redshift 本地文件 支持高级数据结构，具体如下：数组和Map数据 JSON数据 GIS数据 颜色数据 功能扩展能力强，提供了多种扩展机制：扩展数据连接器 ...
创建通用项目
数据在下载后脱离系统的管控，您可设置水印，以提醒注意数据安全，避免随意分享。更多信息，请参见 数据下载配置。重要 系统仅支持非访客角色的用户下载数据结果至本地。数据权限审批 数据权限审批策略可根据不同的数据等级指定不同的审批...
API概览
ListAutoSnapshotPolicyUnappliedDbfs 列出未设置自动快照策略的文件系统 查询您在某个地域下，所有已创建的符合查询条件的未设置自动快照策略的数据库文件系统。ListAutoSnapshotPolicyAppliedDbfs 列出该自动快照策略已设置的文件系统 ...
创建通用项目
数据在下载后脱离系统的管控，您可设置水印，以提醒注意数据安全，避免随意分享。更多信息，请参见 数据下载配置。重要 系统仅支持非访客角色的用户下载数据结果至本地。数据权限审批 数据权限审批策略可根据不同的数据等级指定不同的审批...
配置同步任务中的数据来源和去向
数据来源（Reader）配置信息：配置项 说明 数据源 选择 SQLServer，系统将自动关联 配置SQLServer数据源 时设置的数据源名称。表 选择SQLServer中的一张表进行数据同步。数据过滤 同步数据的筛选条件，暂时不支持limit关键字过滤。SQL语法...
数据源管理常见问题
上传完成后，您可以在画布编辑器中添加组件，在右侧 数据 面板中的 设置数据源 模块，选择 CSV文件 进行配置，配置成功后，组件将展示为静态数据图表。说明 上传添加的CSV文件大小不能超过512KB。API类问题 如何配置API数据源？在画布编辑...
数据源管理常见问题
上传完成后，您可以在画布编辑器中添加组件，在右侧 数据 面板中的 设置数据源 模块，选择 CSV文件 进行配置，配置成功后，组件将展示为静态数据图表。说明 上传添加的CSV文件大小不能超过512KB。API类问题 如何配置API数据源？在画布编辑...
Kafka实时入湖
本文为您介绍如何在数据湖构建（Data Lake Formation，简称DLF）中使用Kafka实时入湖任务将数据同步到数据湖中。重要 数据入湖功能已经停止更新，如果您有数据入湖需求请参考：数据入湖停止更新公告。前提条件 已开通数据湖构建服务，尚未...
流程控制
事件或动作参数说明 事件或动作 说明 当执行此方法后 序列执行节点的数据处理方法。可在配置面板中添加多个处理方法，添加后，序列执行 节点中显示您添加的处理方法；各方法按照顺序进行数据处理。执行 输入上游节点的输出结果，用于该节点...
任务配置
本章节介绍数据处理-任务配置相关功能。平台可支撑自动驾驶生产线的全流程工作，包括 数据导入、数据标准化、数据预处理、数据预标注、人工标注、数据输出 等。您可拖拽所需任务节点，为其设置属性后，通过连线来快速构建所需工作流，并为...
数据接口配置说明
配置数据接口 在 数据接口设置 页签中，系统默认情况下会自带配置一个数据接口示例，您可以自定义按操作配置数据接口内容。操作 说明 展开数据接口详细信息列表 单击示例数据接口右侧的 图标，即可打开当前数据接口的详细配置信息列表。...
数据接口配置说明
配置数据接口 在 数据接口设置 页签中，系统默认情况下会自带配置一个数据接口示例，您可以自定义按操作配置数据接口内容。操作 说明 展开数据接口详细信息列表 单击示例数据接口右侧的 图标，即可打开当前数据接口的详细配置信息列表。...
数据质量概述
数据质量规则关联产出该表数据的调度节点，当任务运行完成便会触发质量规则校验，您可以设置规则的强弱来控制节点是否失败退出，从而避免脏数据影响扩大，并支持通过报警配置第一时间接收报警信息并处理。配置规则 创建规则：数据质量支持...
开通敏感数据保护
配置项 说明 扫描方式 即时任务：配置完成后，系统立即扫描目标数据库，并标记敏感字段。定时任务：设置日期和时间。系统会在设定时间自动扫描目标数据库，并标记敏感字段。周期任务：配置调度周期和具体时间。系统会在指定周期自动扫描...
数仓分层
数据引入层ODS（Operation Data Store）：存放未经过处理的原始数据至数据仓库系统，结构上与源系统保持一致，是数据仓库的数据准备区。主要完成基础数据引入到MaxCompute的职责，同时记录基础数据的历史变化。数据公共层CDM（Common Data ...
逻辑库
为解决分库分表的场景下，查询、维护数据难的问题，DMS推出逻辑库、逻辑表的解决方案。您可以将多个（或单个）物理库配置成一个逻辑库、逻辑表，轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下，业务数据按照路由算法分散...
数据下载配置
数据在下载后脱离系统的管控，您可设置水印，以提醒注意数据安全，避免随意分享。本文为您介绍如何配置数据下载策略及水印。权限说明 仅支持安全管理员对数据下载策略执行添加、编辑、删除操作；支持对水印执行开启、关闭操作。使用说明 当...
数据下载配置
数据在下载后脱离系统的管控，您可设置水印，以提醒注意数据安全，避免随意分享。本文为您介绍如何配置数据下载策略及水印。权限说明 仅支持安全管理员对数据下载策略执行添加、编辑、删除操作；支持对水印执行开启、关闭操作。使用说明 当...
基本概念
任务实例说明 任务（Task）：数据处理作业单元，任务定义了数据处理的操作以及其相关的配置，一个任务通常包含了需要执行的SQL、Python脚本或者应用包等，以及计算引擎的配置信息。任务依赖（Task Deps）：当前任务可能需要有另外（1或者n...
- 产品推荐
- 这些文档可能帮助您