变更管控概述
规则校验不通过的对象即被纳入管控，结合变更策略判断管控方式。创建变更策略：根据用户已经创建好的变更规则，设置其生效范围和管控方式。支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。适用场景 发布管控常用但不...
配置数据质量监控
5、订阅规则校验结果 数据质量为您提供监控报警功能，通过订阅表数据质量校验规则，及时接收质量校验异常并处理，保障数据安全、稳定、按时产出。订阅管理设置完成后，在左侧导航栏，单击 我的订阅，查看和修改已订阅的任务。配置ods_user_...
配置数据质量监控
5、订阅规则校验结果 数据质量为您提供监控报警功能，通过订阅表数据质量校验规则，及时接收质量校验异常并处理，保障数据安全、稳定、按时产出。订阅管理设置完成后，在左侧导航栏，单击 我的订阅，查看和修改已订阅的任务。配置ods_user_...
创建全域数据表质量规则
规则校验 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置...
创建全域数据表质量规则
规则校验 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置...
UpdateQualityRule
false：在数据质量规则关联产出表数据的调度任务执行时，不会触发质量规则校验。ProjectId Long 否 26 DataWorks项目空间ID。TaskSetting String 否 x=a,y=b 在自定义规则之前插入的变量设置，格式如：x=a,y=b 返回数据 名称 类型 示例值 ...
创建实时元表规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
管理中心概述
在使用Dataphin前，超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置...规则校验不通过的对象即被纳入管控，结合变更策略判断管控方式。
创建实时元表规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
创建数据表质量规则
规则校验 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件（and/or）组合，实际配置中建议小于3条。详情请参见 校验配置...
创建数据表质量规则
规则校验 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件（and/or）组合，实际配置中建议小于3条。详情请参见 校验配置...
资源过户-常见问题
过户前的准备工作：整个过户过程会有很多规则校验，且每个步骤都会校验。如果您的实例不符合规则，会在过户过程中提示出来。实例在过户中不能进行的操作：不允许进行升降配、手工续费、注销、退订、更换操作系统、带宽升降级、预付费转后...
创建数据源质量规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
创建数据源质量规则
查看质量报告 单击 质量报告，查看当前质量规则的 规则校验概览 和 规则校验明细。您可根据异常结果、分区时间、规则或对象的名称关键字快捷筛选校验明细。单击 图标，查看质量规则的规则校验详情。单击 图标，查看质量规则的执行日志。...
批量创建质量规则
校验规则说明 数据表参与质量规则校验时，如果触发了质量弱监控规则，系统会给您发送告警消息，便于您及时发现并处理异常；如果触发了质量强监控规则，系统会自动中断该表所在的任务，避免脏数据流入下游，同时系统会给您发送告警消息，...
批量创建质量规则
校验规则说明 数据表参与质量规则校验时，如果触发了质量弱监控规则，系统会给您发送告警消息，便于您及时发现并处理异常；如果触发了质量强监控规则，系统会自动中断该表所在的任务，避免脏数据流入下游，同时系统会给您发送告警消息，...
管理中心概述
在使用Dataphin前，超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则，优化逻辑表任务、SQL查询任务及设置...规则校验不通过的对象即被纳入管控，结合变更策略判断管控方式。
数据质量入门
后续步骤 当产出目标表数据的任务启动执行时，则会触发其关联的数据质量规则校验。您可在实例详情页查看实例状态，并单击运行日志中的DQC，查看数据质量校验过程。查看周期实例，详情请参见 查看周期实例。本文示例查看 result_table 的...
结构设计
控制新建表风险 控制修改字段风险 控制修改索引风险 控制SQL执行风险 审批规则校验 以上流程中均内置了大量的安全规则模板，您可以直接使用这些模板，也可以自定义新增规则。具体操作，请参见 新增规则。因子和动作 因子：因子是系统内置...
检查zone名称
调用CheckZoneName根据规则校验zone是否可添加。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String ...
引用物理表质量规则
如果配置了质量规则的数据模型在开发环境场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景画布中会自动生成质量检测节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理...
引用物理表质量规则
如果配置了质量规则的数据模型在开发环境场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景画布中会自动生成质量检测节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理...
配置规则：按模板（批量）
根据您选择的表级规则模板和字段级规则模板，批量添加需要进行该规则校验的表或字段，添加后，请为分区表配置分区表达式。分区表达式用于确定校验数据的采样范围。对于非分区表，系统会默认配置为 NOTAPARTITIONTABLE。添加表或字段。单击 ...
数据治理
配置数据质量规则 对生产表（retail_e_commerce_2.ods_mbr_user_info）配置 表行数不为0 和 业务主键唯一 规则校验。配置使用按表配置，详细操作步骤请参见 配置规则：按表（单表），以下为配置要点。配置分区表达式 ds=$[yyyymmdd-1]。...
操作流程
场景画布中引用物理表，自动生成质量检查节点 如果配置了质量规则的数据模型在场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景中自动生成质量检查节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法...
操作流程
场景画布中引用物理表，自动生成质量检查节点 如果配置了质量规则的数据模型在场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景中自动生成质量检查节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法...
规则（Rules）
如果 Assert 返回结果为 true 时，表示规则校验通过，您可以继续完成资源栈的预览、创建和更新操作。示例 当您在生产环境创建ECS实例时，ECS实例的公网带宽必须为0。在预发环境创建ECS实例时，ECS实例的计费方式必须是按量付费。...
SQL变更
在工单提交、审批时，通过一系列的安全规则进行校验，只有满足规则校验的SQL，才能正常执行。前提条件 用户角色为 管理员、DBA 或 安全管理员。背景信息 数据管理DMS的安全规则具备非常灵活的DSL能力，可以根据业务需求自定义风险级别，让...
API概览
检查zone名称 调用CheckZoneName根据规则校验zone是否可添加。修改zone备注信息 调用UpdateZoneRemark修改zone的备注信息。获取zone详细信息 调用DescribeZoneInfo获取指定zone的详细信息。删除zone 调用DeleteZone删除private zone。获取...
API概览
检查zone名称 调用CheckZoneName根据规则校验zone是否可添加。修改zone备注信息 调用UpdateZoneRemark修改zone的备注信息。获取zone详细信息 调用DescribeZoneInfo获取指定zone的详细信息。删除zone 调用DeleteZone删除private zone。获取...
配置数据质量监控
本文为您介绍如何配置表dwd_log_info_di_emr的数据质量...订阅规则校验结果。在数据质量规则配置页面，单击 订阅管理。在 订阅管理 对话框中，设置 订阅方式 和 接受对象。设置完成后，单击 保存，您可以进入 我的订阅 页面进行查看和修改。
SQL窗口-Redis数据库
检测点工作流程图：因子和动作 因子 系统内置变量，可用来获取安全规则校验的上下文信息，如获取命令类型、影响行数等。说明 因子全部以@fac.开头，后接因子名称。每个模块的不同检测点会提供不同因子。表 1.SQL窗口模块的因子 因子名 说明...
OpenEvent概述
例如，在数据治理的数据质量模块，给某个表启用了表行数大于0的规则，触发了规则并且规则校验完毕，会把规则校验结果（是否通过、样本等信息）发送给订阅端。租户级 管理控制台 删除项目空间前置事件 描述：在 工作空间列表 页面，用户可...
权限申请
因子和动作 因子：因子是系统内置变量，可用来获取安全规则校验的上下文信息，如获取SQL类型、数据库名称等。因子全部以@fac.开头，后接因子名称。每个模块的不同检测点均提供不同因子，权限申请 中提供因子的说明请参见下表。因子名 说明@...
数据加工过程卡点校验
即在SQL提交前进行相关规则校验。目前公共云没有直接可用的工具辅助校验，您可以自己开发相关的工具。规则分类如下：代码规范类规则。例如，表命名规范、生命周期设置及表注释等。代码质量类规则。例如，分母为0提醒、NULL值参与计算影响...
使用领域模型设计器
可选：在设计器画布中将目标对象拖拽至画布右侧进行领域模型设计的过程中，平台会对设计器内的领域模型进行规则校验。校验如果发现可能存在不合理的地方，将在设计器底部的 校验结果 区域显示校验详情。单击 校验结果，如果校验结果暂无...
CreateQueryProcessor-创建查询分析规则
当 dryRun=true 时，表示进行查询分析规则校验，默认 dryRun 不传为 false。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的...
数据风险点监控
您可以对数据库表的记录进行规则校验，制定监控规则。在业务系统中，当每个业务过程进行数据入库时，对数据进行校验。例如，交易系统中，订单拍下时间、订单完结时间、订单支付金额、订单状态流转都可以配置监控校验规则。订单拍下时间不会...
2022年度更新日志
修复服务连接列表无法展示问题 修复新建应用，应用名规则校验不准确问题 2022-03-17 更新日志 新功能 快速入门引导 资源池列表空状态增加三步快速入门引导，帮助用户快速完成资源导入、新建并部署应用主流程 应用列表空状态增加应用快速...
库表同步
因子和动作 因子 因子是系统内置变量，可用来获取安全规则校验的上下文信息，如获取SQL类型、影响行数等。因子全部以@fac.开头，后接因子名称。每个模块的不同检测点均提供不同因子，库表同步 中提供因子的说明请参见下表：因子名 说明@fac...
- 产品推荐
- 这些文档可能帮助您