创建指标质量规则
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
批量创建质量规则
批量创建质量规则可帮助您为监控对象配置统一的质量规则，并设置异常告警信息，实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境，发布详情请参见 管理发布任务。权限说明 超级管理员、...
批量创建质量规则
批量创建质量规则可帮助您为监控对象配置统一的质量规则，并设置异常告警信息，实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境，发布详情请参见 管理发布任务。权限说明 超级管理员、...
比值控制
是 无[-99999999,99999999]输出质量码说明 输出质量码处理方式如下：若输入质量码均正常，则输出质量码为参考变量的质量码。若操作变量的质量码正常，参考变量或比值参考变量的质量码存在异常，则输出质量码为操作变量的质量码。若操作变量...
使用网络洞察仪
您可以使用洞察仪获取实时公网质量评估数据，及时感知公网质量劣化，接收公网质量异常事件和影响面分析。创建网络洞察仪 您需要为洞察仪配置网络监测对象，创建之后，等待约10分钟，洞察仪将为您开启资源流量采集并发布特定指标。通过洞察...
引用物理表质量规则
如果配置了质量规则的数据模型在开发环境场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景画布中会自动生成质量检测节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理...
创建指标质量规则
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
数据质量监控
数据质量监控模块为您提供数据表开发的跟踪管理功能。数据质量监控的界面如下图所示，默认显示当前项目接入的“现场开发”类的全部数据表，可切换显示项目中“同步专网”或“产品部署”类数据表。其中：现场开发类表：可选择显示总数据表、...
新增逻辑表质量规则
通过质量规则管理页面，统一管理并设置各个逻辑表质量规则，方便用户查看以及设置所有逻辑表的质量规则。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑...
创建数据源质量规则
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果，试跑 指对某个质量规则进行一次模拟执行，以检测规则的正确性和运行情况，试跑的结果不会在质量报告中显示；运行 指在特定时间内对质量规则进行检查，运行的结果会...
配置数据质量监控
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息（ods_user_info_d）同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
数据质量：全流程的质量监控
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、字段级别和自定义的监控模板。数据质量帮助您第一时间感知到源端数据的变更与ETL（Extract Transformation Load）中产生的脏数据，自动拦截问题任务，有效阻断脏数据向下游蔓延...
引用物理表质量规则
如果配置了质量规则的数据模型在开发环境场景画布中被引用，且场景画布中开启了自动质量规则校验开关，场景画布中会自动生成质量检测节点。当算法运行时，画布中引用的数据质量规则也会自动运行，以检查算法输出数据是否符合要求，可在物理...
创建数据源质量规则
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果，试跑 指对某个质量规则进行一次模拟执行，以检测规则的正确性和运行情况，试跑的结果不会在质量报告中显示；运行 指在特定时间内对质量规则进行检查，运行的结果会...
配置数据质量监控
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前，请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息（ods_user_info_d）同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
资产质量权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 质量规则（包括批量添加质量规则）新建质量规则 Y N N N Y N N 编辑质量规则 Y N N N Y N N 开启&暂停质量规则 Y N N N Y N N 删除质量规则 Y N N N...
资产质量权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 质量规则（包括批量添加质量规则）新建质量规则 Y N N N Y N N 编辑质量规则 Y N N N Y N N 开启&暂停质量规则 Y N N N Y N N 删除质量规则 Y N N N...
创建实时元表规则
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果，试跑 指对某个质量规则进行一次模拟执行，以检测规则的正确性和运行情况，试跑的结果不会在质量报告中显示；运行 指在特定时间内对质量规则进行检查，运行的结果会...
创建实时元表规则
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果，试跑 指对某个质量规则进行一次模拟执行，以检测规则的正确性和运行情况，试跑的结果不会在质量报告中显示；运行 指在特定时间内对质量规则进行检查，运行的结果会...
物理化质量校验函数
您可以通过对已创建的质量校验函数进行物理化操作，将质量校验函数存储至对应的云计算资源中，供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数，具体操作，请参见 新建质量校验函数。操作步骤 ...
数据质量衡量
在了解保障基于MaxCompute的数据仓库数据质量的方案后，您还需要进一步学习如何制定一套标准度量方案，以及判断质量监控方案是否合适业务需求以及如何改进。例如，针对每一个数据质量事件，必须分析原因和处理过程，制定后续同类事件预防...
查看表资产详情
数据质量 单击 数据质量>质量报告，展示数据表字段个数、质量检测字段数、质量检测规则数、质量评分和质量评分规则统计等。单击 质量评分说明，查看质量评分概述、质量评价维度分类和质量规则等。单击 评分趋势查看，通过评分趋势图了解该...
操作流程
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作，请参见 新建质量校验函数 和 物理化质量校验函数。...
幅度限制
不限 OUT端口-输出参数 参数名 参数描述 输出数据类型 out 限幅输出 浮点数 输出质量码说明 输出质量码的处理方式如下：若输入质量码存在坏值，则输出质量码为0。若输入质量码均为好值，则输出质量码为192。注：质量码缺失或质量码类型为非...
操作流程
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。具体操作，请参见 新建质量校验函数 和 物理化质量校验函数。...
查看表资产详情
数据质量 单击 数据质量>质量报告，展示数据表字段个数、质量检测字段数、质量检测规则数、质量评分和质量评分规则统计等。单击 质量评分说明，查看质量评分概述、质量评价维度分类和质量规则等。单击 评分趋势查看，通过评分趋势图了解该...
物理化质量校验函数
您可以通过对已创建的质量校验函数进行物理化操作，将质量校验函数存储至对应的云计算资源中，供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数，具体操作，请参见 新建质量校验函数。操作步骤 ...
质量统计
质量统计功能可以查询指定AppID下质量总览数据以及质量分布数据。通过阅读本文，您可以了解质量统计的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>质量统计，进入质量统计界面。可选：选择待查询的AppID，单击 ...
死区处理
是 不归零 不归零 归零 输出质量码说明 信号的输出质量码处理方式如下：若输入质量码缺失或质量码类型非数值，则输出质量码为-1。若输入质量码为坏值，则输出质量码为0。若输入质量码为好值，则输出质量码与输入质量码一致。说明 ①质量码...
归一化
是 min-max min-max Z-score 输出质量码说明 输出质量码的处理方式如下：若输入质量码缺失或质量码类型非数值，则输出质量码为-1。若输入质量码为坏值，则输出质量码为0。若输入质量码为好值，则输出质量码与输入质量码一致。说明 ①质量码...
更新生产场景质量规则
当质量规则变更时，为使数据开发中生产场景中引用的规则同步更新生效，需要一键更新开发场景和生产场景中的质量规则，让用户使用更方便。前提条件 数据开发的生产场景中引用了质量规则，且引用的质量规则有变更，场景状态为 生产场景待更新...
查看逻辑表质量规则
通过质量规则管理页面，我们可以统一查看逻辑表的全部质量规则，方便用户对已创建的规则过滤、筛选查看。本文介绍如何查看逻辑表质量规则。前提条件 已存在规则，具体操作，请参见 新增逻辑表质量规则 或者 设置逻辑表质量规则。操作步骤 ...
校验记录概述
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...
校验记录概述
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...
04查看质量评估任务结果
本文介绍如何查看质量评估任务结果。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已在工作组中分别添加数据源类型为MaxCompute、RDS MySQL的数据源，具体操作，请参见 新建云计算资源。已创建逻辑表，具体操作...
图片质量评分
您可以使用图片质量评分功能检测图片的综合质量分数，通常用于封面图、低质量图片过滤等场景。重要 此文档已不再维护，建议您使用新版智能媒体管理。关于智能媒体管理新版与旧版的对比，请参见 新旧版本使用指引。关于新版智能媒体管理图片...
质量统计
质量统计功能可以查询指定AppID下质量总览数据以及质量分布数据。通过阅读本文，您可以了解质量统计的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>质量统计，进入质量统计界面。可选：选择待查询的AppID，单击 ...
风险治理的方法论
经过第三方认证机构评定，IT系统不符合行业基础安全标准，商务合作伙伴认为该企业存在较大的潜在风险，决定终止商务合作。对于业务需重度依赖IT系统的企业，如游戏、在线教育、直播、电商等，IT风险治理就更加重要，否则可能就要遭受企业...
新建及管理知识库
知识库能够帮助您针对具体的质量问题或某一类质量问题，沉淀相关解决方案，提高问题处理效率。本文为您介绍如何新建及管理知识库。权限说明 所有成员支持新建、查看知识库以及为知识库关联相关的质量规则；超级管理员、质量管理员支持编辑...
新建及管理知识库
知识库能够帮助您针对具体的质量问题或某一类质量问题，沉淀相关解决方案，提高问题处理效率。本文为您介绍如何新建及管理知识库。权限说明 所有成员支持新建、查看知识库以及为知识库关联相关的质量规则；超级管理员、质量管理员支持编辑...
- 产品推荐
- 这些文档可能帮助您