版本说明

不支持 最多支持10个模板 单模板最多支持100条规则 支持的能力:支持IP或URL匹配 支持JS校验规则匹配最大IP数100个 最多支持20个模板 单模板最多支持200条规则 支持的能力:支持IP或URL匹配、全部header匹配、正则匹配、body匹配 支持JS...

查看全域数据表校验记录

全域数据表校验记录用于记录质量规则校验全域数据表的结果。本文为您介绍如何查看全域数据表质量规则的校验记录。全域数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 全域数据表 校验记录页面。参数 说明 ...

查看Dataphin数据表校验记录

Dataphin数据表校验记录用于记录质量规则校验Dataphin数据表的结果。本文为您介绍如何查看Dataphin数据表质量规则的校验记录。Dataphin数据表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 Dataphin数据表 校验...

查看指标校验记录

指标校验记录用于记录质量规则校验指标的结果。本文为您介绍如何查看指标质量规则的校验记录。指标校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 指标 校验记录页面。参数 说明 筛选与搜索 您可以选择 规则异常...

查看实时元表校验记录

实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 实时元表 校验记录页面。参数 说明 筛选与搜索...

查看实时元表校验记录

实时元表校验记录用于记录质量规则校验实时元表的结果。本文为您介绍如何查看实时元表质量规则的校验记录。实时元表校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 实时元表 校验记录页面。参数 说明 筛选与搜索...

质量大盘

质量大盘为您展示质量规则校验的表数、校验结果为异常的表数、规则应用趋势、规则异常趋势,帮助您从整体质量规则校验结果的视角出发,快速识别并处理异常的校验结果。质量大盘介绍 质量大盘页面默认为您展示今日的全局质量监控数据,请...

查看数据源校验记录

数据源校验记录用于记录质量规则校验数据源的结果。本文为您介绍如何查看数据源质量规则的校验记录。数据源校验记录 在Dataphin首页,单击顶部菜单栏的 资产。按照下图操作指引,进入 数据源 校验记录页面。参数 说明 筛选与搜索 您可以...

资产质量概述

资产质量包括 质量概览、质量监控 和 质量治理:质量概览 为您展示质量规则校验的表数、校验结果为异常的表数等信息,帮助您从整体质量规则校验结果的视角出发,快速识别并处理异常的校验结果。质量监控 为您提供质量规则列表、配置质量...

基本概念

当强规则校验结果为异常时,下游节点的运维调度会自动停止,同时当前节点的状态标识为失败并告警给质量告警接收人。弱规则 质量规则的校验结果对下游节点没有影响,同时不支持强制终止下游节点运维调度。如果弱规则校验结果异常时,则系统...

基本概念

当强规则校验结果为异常时,下游节点的运维调度会自动停止,同时当前节点的状态标识为失败并告警给质量告警接收人。弱规则 质量规则的校验结果对下游节点没有影响,同时不支持强制终止下游节点运维调度。如果弱规则校验结果异常时,则系统...

Dataphin质量规则校验是否可以在规则内容SQL相关表...

问题描述 Dataphin质量规则校验是否可以在规则内容SQL相关表同步完成,再触发质量规则校验。解决方案 目前只支持对挂规则的目标表进行触发校验,如果需要规则内容SQL相关表同步完成的话,可以考虑在调度上加一个下游节点,在下游节点的表上...

数据质量概述

DataWorks平台将会根据数据质量规则强弱和数据质量规则校验结果决定任务是否由于质量规则校验失败而退出,并阻塞下游节点执行,防止脏数据影响范围进一步扩大。查看校验结果 您可以通过运维中心节点运行日志和数据质量任务查询页面查看数据...

Dataphin脚本任务运行报错:“DQE callback-...

问题原因 当前表配置的数据质量规则校验失败了。解决方案 检查下配置的质量规则的运行记录,看看有没有对应到这个任务里的表的,可以检查下具体的校验规则。不想触发这个质量规则校验的话,可以把这个校验关了,或者修改校验规则,修改一下...

进入数据质量概览(新版)

数据质量概览为您展示当前工作空间下,需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、质量规则覆盖保障情况等,帮助质量负责人快速了解工作空间数据质量整体情况,...

Web应用防火墙的审计事件

DescribeAssetsExactDomainInfos 获取资产精确域名信息。DescribeAssetsRootDomainInfos 获取资产根域名信息。DescribeAssetsRootDomains 获取根域名资产。DescribeAssetsSubDomainInfos 获取资产子域名信息。DescribeAssetsSubDomains ...

文档更新动态(2022年)

支持定义变更管控策略,基于定义好的变更校验规则,配置校验时间区间和校验范围,针对校验不通过的发布申请,可设置为阻断发布或警告提示,以实现特定场景下的发布管控,降低风险。新增说明 变更管控概述 2022年07月19日 任务中心与消息...

Dataphin中数据表规则校验结果的存储路径

概述 本文介绍数据表规则校验结果的存储路径。详细信息 这些数据是存储在nightswatch中的表monitor_historical_metric中。适用于 Dataphin

自定义组件API

示例如下:/meta.js const componentMeta={/.propsSchema:{ styleSchema:{ schema:{ type:'object',properties:{ display:{ type:'object',title:t('显示设置'),properties:{/.startAngle:{ title:t('起始角度'),id:'startAngle',type:'...

数据追踪

审批规则校验:系统会根据 审批规则校验 中定义的规则对数据追踪工单作出相应处理。您可以使用安全规则模板库中提供的规则,也可以自定义新增规则,详情请参见 新增规则。因子和动作 因子:因子是系统内置变量,可用来获取安全规则校验的上...

配置集成管道质量监控

规则强度 选择质量规则的强弱:如果您选择了 强规则,则质量规则校验的结果为异常时报警并阻塞下游任务节点。如果您选择了 弱规则,则质量规则校验的结果为异常时报警但不阻塞下游任务节点。规则配置 当规则模板选择 表稳定性校验、表波动...

敏感列变更

注意事项 当 审批规则校验 中未配置审批流程时,系统会采用此默认的审批模板。您可以通过 切换审批模板 来更改默认审批模板的审批流程。具体操作,请参见 修改默认审批模板。基础配置项 检测点 当一个敏感列变更工单被提交时,系统会校验该...

测试数据构建

注意事项 当测试数据构建 审批规则校验 中未配置审批流程时,系统会采用默认的审批模板。您可以通过 切换审批模板 来 修改默认审批模板。配置项说明 检测点 当一个测试数据构建工单被提交时,系统会校验该工单是否符合检测点的相关规则。...

配置集成管道质量监控

规则强度 选择质量规则的强弱:如果您选择了 强规则,则质量规则校验的结果为异常时报警并阻塞下游任务节点。如果您选择了 弱规则,则质量规则校验的结果为异常时报警但不阻塞下游任务节点。规则配置 当规则模板选择 表稳定性校验、表波动...

Dataphin添加ClickHouse数据源时报数据源校验规则校验...

问题描述 Dataphin添加ClickHouse数据源时报数据源校验规则校验失败的错误,详细错误如下:问题原因 JDBC URL使用的是ClickHouse的集群方式连接的,目前还不支持ClickHouse的集群连接方式。解决方案 JDBC URL中需要使用单个IP地址的方式来...

配置数据质量规则去噪

当任务触发质量规则校验时,您可以使用去噪管理功能,对当前工作空间内,数据质量规则校验异常的数据不触发报警,且不阻塞任务运行(任务不会因为数据质量校验不通过而失败退出)。前提条件 已创建数据质量校验规则,详情请参见 配置规则:...

校验记录概述

校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...

数据库克隆

审批规则校验:系统会根据 审批规则校验 中定义的规则,对数据库克隆工单作出相应处理。您可以使用安全规则模板库中提供的规则,也可以自定义 新增规则。动作 动作是满足 if 条件之后系统执行的行为,比如:禁止提交工单、选择工作流、允许...

数据导出

基础配置项 当审批规则校验中未配置不同风险对应的审批流程时,系统会采用此默认的审批模板。您可以通过切换审批模板来更改默认审批模板的审批流程。具体操作,请参见 修改默认审批模板。检测点 审批规则校验:您可以自定义安全规则来实现...

创建全域数据表质量规则

规则校验 数据质量规则校验后,结果会和异常校验的配置进行对比,符合条件则校验结果为不通过;同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定,支持多种条件的and/or条件,实际配置中建议小于3条。详情请参见 校验配置...

创建变更规则

规则校验不通过的对象即被纳入管控,结合变更策略判断管控方式。本文为您介绍如何创建变更规则。使用限制 仅超级管理员和系统管理员可以新建变更规则。仅超级管理员、系统管理员和变更策略负责人可以编辑和删除变更规则。操作步骤 在...

创建变更规则

规则校验不通过的对象即被纳入管控,结合变更策略判断管控方式。本文为您介绍如何创建变更规则。使用限制 仅超级管理员和系统管理员可以新建变更规则。仅超级管理员、系统管理员和变更策略负责人可以编辑和删除变更规则。操作步骤 在...

管理问题数据

背景信息 问题数据表 数据质量支持在部分规则校验不通过的情况下,系统自动创建 问题数据表 存储质量规则校验过程中发现的问题数据。问题数据表名生成规则:{监控数据表原表名}_dirtydata_dw_system_dqc。问题数据表所属空间:根据当前表所...

创建数据表质量规则

规则校验 数据质量规则校验后,结果会和异常校验的配置进行对比,符合条件则校验结果为不通过;同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定,支持多种条件的and/or条件,实际配置中建议小于3条。详情请参见 校验配置...

变更管控概述

规则校验不通过的对象即被纳入管控,结合变更策略判断管控方式。创建变更策略:根据用户已经创建好的变更规则,设置其生效范围和管控方式。支持在单个变更策略中配置多个规则并给每个规则指定不同的管控方式。适用场景 发布管控常用但不...

配置数据质量监控

5、订阅规则校验结果 数据质量为您提供监控报警功能,通过订阅表数据质量校验规则,及时接收质量校验异常并处理,保障数据安全、稳定、按时产出。订阅管理设置完成后,在左侧导航栏,单击 我的订阅,查看和修改已订阅的任务。配置ods_user_...

配置数据质量监控

5、订阅规则校验结果 数据质量为您提供监控报警功能,通过订阅表数据质量校验规则,及时接收质量校验异常并处理,保障数据安全、稳定、按时产出。订阅管理设置完成后,在左侧导航栏,单击 我的订阅,查看和修改已订阅的任务。配置ods_user_...

UpdateQualityRule

false:在数据质量规则关联产出表数据的调度任务执行时,不会触发质量规则校验。ProjectId Long 否 26 DataWorks项目空间ID。TaskSetting String 否 x=a,y=b 在自定义规则之前插入的变量设置,格式如:x=a,y=b 返回数据 名称 类型 示例值 ...

管理中心概述

在使用Dataphin前,超级管理员需要通过管理中心添加Dataphin成员及设置Dataphin实例的计算引擎。同时您也可以配置计算和存储资源的规则,优化逻辑表任务、SQL查询任务及设置...规则校验不通过的对象即被纳入管控,结合变更策略判断管控方式。

资源过户-常见问题

过户前的准备工作:整个过户过程会有很多规则校验,且每个步骤都会校验。如果您的实例不符合规则,会在过户过程中提示出来。实例在过户中不能进行的操作:不允许进行升降配、手工续费、注销、退订、更换操作系统、带宽升降级、预付费转后...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
Node.js 性能平台 弹性公网IP 短信服务 人工智能平台 PAI 物联网平台 对象存储
新人特惠 爆款特惠 最新活动 免费试用