批量创建质量规则
特殊配置如下：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看...
批量创建质量规则
特殊配置如下：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看...
新建及管理数据标准
创建Dataphin数据表质量规则时，可引用此处配置的质量监控规则，规则配置和校验配置复用标准配置不可修改，支持自定义规则强弱、调度方式、生效开关、告警等信息。当前标准映射上的所有资产对象，可在资产质量模块引用配置的内容质量监控，...
新建及管理数据标准
创建Dataphin数据表质量规则时，可引用此处配置的质量监控规则，规则配置和校验配置复用标准配置不可修改，支持自定义规则强弱、调度方式、生效开关、告警等信息。当前标准映射上的所有资产对象，可在资产质量模块引用配置的内容质量监控，...
落标监控概述
数据标准和资产对象的映射关联通过落标映射规则来定义，对象是否遵循了映射到的标准通过落标监控来判断。本文为您介绍落标监控的...这种配置方式下，质量监控规则的 规则配置 和 校验配置 均为自行定义，详情请参见 步骤二：新建质量规则。
落标监控概述
数据标准和资产对象的映射关联通过落标映射规则来定义，对象是否遵循了映射到的标准通过落标监控来判断。本文为您介绍落标监控的...这种配置方式下，质量监控规则的 规则配置 和 校验配置 均为自行定义，详情请参见 步骤二：质量规则配置。
操作流程
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作，请参见 新建质量校验函数 和 物理化质量校验函数。...
操作流程
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作，请参见 新建质量校验函数 和 物理化质量校验函数。...
功能简介
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
功能简介
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
数据标准
字段标准设计 数据元管理：提供对数据元的标准定义和统一管理，通过分析业务流程，抽象关键业务对象、业务对象属性，配置数据元的类型、长度、质量校验函数和引用数据字典，为逻辑表标准化设计及数据治理过程中的质量监控提供规则依据；...
02创建质量校验函数并物理化
创建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验，本章节介绍如何创建质量校验函数。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在工作...
新建质量校验函数
当业务需要比较复杂的字段值域校验规则时，系统支持上传自定义函数，用来校验字段的内容规范，通过新建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。本文以基于资源的...
新建质量校验函数
当业务需要比较复杂的字段值域校验规则时，系统支持上传自定义函数，用来校验字段的内容规范，通过新建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。本文以基于资源的...
数据校验计费方式
本文介绍DTS数据校验任务的计费方式和计费标准。计费方式 全量数据校验任务当前仅支持按量付费（后付费）的计费方式。...详情请参见 配置数据校验 和 查看数据校验详情。校验的数据量如何计算？校验的数据量是指源库中待校验数据的大小。
使用DTS迁移Redis
通常情况下，该配置项保持默认即可，更多信息请参见 配置数据校验 和 附录：高级设置说明。进行校验配置，并单击页面下方的 下一步保存任务并预检查。通常情况下，该配置项保持默认即可，更多信息请参见 在DTS同步或迁移实例中配置数据校验...
云数据库Redis实例间单向数据迁移
通常情况下，该配置项保持默认即可，更多信息请参见 配置数据校验 和 附录：高级设置说明。进行校验配置，并单击页面下方的 下一步保存任务并预检查。通常情况下，该配置项保持默认即可，更多信息请参见 在DTS同步或迁移实例中配置数据校验...
配置集成管道质量监控
异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置说明。调度方式 支持 定时调度、本任务运行前调度 和 本任务完成后调度。定时调度：按照设置的时间，周期性的对数据进行质量...
配置集成管道质量监控
异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置说明。调度方式 支持 定时调度、本任务运行前调度 和 本任务完成后调度。定时调度：按照设置的时间，周期性的对数据进行质量...
创建指标质量规则
字段分组个数校验/字段重复值个数校验：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验...
创建指标质量规则
字段分组个数校验/字段重复值个数校验：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验...
创建全域数据表质量规则
校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看质量报告。当规则...
创建全域数据表质量规则
校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看质量报告。当规则...
创建数据表质量规则
特殊配置如下：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看...
创建数据表质量规则
特殊配置如下：校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看...
创建实时元表规则
异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置说明。单击 确定，完成质量规则的配置。预览SQL 说明 关键信息没有填写完整，预览SQL不可用。左边为上次保存配置SQL预览，若...
创建实时元表规则
异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置说明。单击 确定，完成质量规则的配置。预览SQL 说明 关键信息没有填写完整，预览SQL不可用。左边为上次保存配置SQL预览，若...
快速开始
部署应用 CADT应用部署阶段，依次完成资源验证、应用询价并下单部署，自动校验资源库存和配置等内容，并呈现详细的应用价格清单。详细内容，请查看 部署应用。资源验证：自动校验产品是否开通、资源配置是否正确以及是否有足够的资源库存供...
文档更新动态（2022年）
支持定义变更管控策略，基于定义好的变更校验规则，配置校验时间区间和校验范围，针对校验不通过的发布申请，可设置为阻断发布或警告提示，以实现特定场景下的发布管控，降低风险。新增说明 变更管控概述 2022年07月19日 任务中心与消息...
自定义消息渠道支持的元数据
quality_index String 质量校验的配置值和实际校验值，如校验配置：'正常行数>=100 and 异常率；实际指标：'正常行数=100 and 异常行数=11%'。示例：校验配置：'正常行数>=100 and 异常率；实际指标：'正常行数=100 and 异常行数=11%'。...
功能更新动态（2022年）
华北2（北京）基线监控配置、调度配置、计费说明 2022年10月27日 华东1（杭州）2022年11月01日 华南1（深圳）2022年11月03日 华东2（上海）数据标准 支持标准集的属性配置、数据标准的批量导入、下载及上线管理、码表和词根的配置管理。...
2023年
本章节介绍了2023年数据传输服务DTS（Data Transmission Service）产品功能和对应的文档动态。2023年12月 类型 重点内容 相关文档 新增 新增支持将MongoDB（副本集架构或分片集群架构）的数据同步到Lindorm（宽表引擎），以帮助您的应用...
功能更新动态（2024年）
配置FTP输出组件 配置MySQL输出组件 配置AnalyticDB for MySQL 3.0输出组件 配置TiDB输出组件 配置OSS输出组件 配置Amazon S3输出组件 通过整库迁移配置集成任务 离线研发 支持基于MySQL、Oracle数据源的数据库SQL任务调度和即席查询。...
文档更新动态（2024年）
配置MySQL输出组件 配置AnalyticDB for MySQL 3.0输出组件 配置TiDB输出组件 配置OSS输出组件 配置Amazon S3输出组件 通过整库迁移配置集成任务 数据开发-编码研发-离线任务开发 支持基于MySQL、Oracle数据源的数据库SQL任务调度和即席查询...
更新插件版本
配置校验 如果插件需要配置，可以在此处填写配置字段校验，用作启用插件时的配置校验，如无需配置留空即可。插件执行阶段 阶段处理顺序：认证阶段>鉴权阶段>统计阶段>默认阶段。若不依赖其他插件执行顺序，填默认阶段即可。插件执行优先级 ...
API概览
VerifyPlaybook 校验剧本配置 校验剧本的配置是否正确，编排的逻辑是否合理。TriggerSophonPlaybook 触发剧本或响应命令 用于触发运行剧本或响应命令。TriggerPlaybook 触发剧本 用于触发已启用的自定义剧本或预定义剧本。RunPython3Script...
号码认证服务端集成
本文为您介绍实现校验和获取用户手机号的操作需要使用的 OpenAPI。服务端需要集成的OpenAPI 根据不同的交互形态和客户端类型，服务端在集成时需要对接的OpenAPI有所不同。如下表：客户端类型 交互形态 一键登录 本机号码校验 Android ...
管理接口
校验结果 展示接口适用组件的校验进度，分别展示已通过校验、未通过校验和待校验的组件个数。状态 接口的使用状态，包括正常和停用两种状态。编辑接口信息 在接口列表中，选择目标接口，单击操作列下的 编辑 菜单修改接口信息。接口的参数...
库表同步
例如：当您提交一个 结构同步 工单时，只有 基础配置项 和 结构同步校验 检查点会起作用。结构同步校验：对 结构同步 工单做相应的限制或设置审批流程。影子表同步校验：对 影子表同步 工单做相应的限制或设置审批流程。空库初始化校验：对...
基本概念
如果规则同时为定时触发和资源配置变更触发，则同时包括定时和配置变更时评估的记录。等保预检 等保2.0预检为云上的合规检测，为您动态且持续地检测阿里云上资源的合规性，从而避免正式检测时多次反复整改，帮助您快速通过等保检测。关于...
- 产品推荐
- 这些文档可能帮助您