通过质量规则管理页面,统一管理并设置各个逻辑表质量规则,方便用户查看以及设置所有逻辑表的质量规则。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑...
Dataphin支持创建校验指标的质量规则,提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则,如何添加监控对象,请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
批量创建质量规则可帮助您为监控对象配置统一的质量规则,并设置异常告警信息,实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境,发布详情请参见 管理发布任务。权限说明 超级管理员、...
批量创建质量规则可帮助您为监控对象配置统一的质量规则,并设置异常告警信息,实时监控对象的动态。本文为您介绍如何批量配置质量规则。前提条件 已将数据表或指标发布至生产环境,发布详情请参见 管理发布任务。权限说明 超级管理员、...
是 无[-99999999,99999999]输出质量码说明 输出质量码处理方式如下:若输入质量码均正常,则输出质量码为参考变量的质量码。若操作变量的质量码正常,参考变量或比值参考变量的质量码存在异常,则输出质量码为操作变量的质量码。若操作变量...
您可以使用洞察仪获取实时公网质量评估数据,及时感知公网质量劣化,接收公网质量异常事件和影响面分析。创建网络洞察仪 您需要为洞察仪配置网络监测对象,创建之后,等待约10分钟,洞察仪将为您开启资源流量采集并发布特定指标。通过洞察...
如果配置了质量规则的数据模型在开发环境场景画布中被引用,且场景画布中开启了自动质量规则校验开关,场景画布中会自动生成质量检测节点。当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法输出数据是否符合要求,可在物理...
Dataphin支持创建校验指标的质量规则,提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则,如何添加监控对象,请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
数据质量监控模块为您提供数据表开发的跟踪管理功能。数据质量监控的界面如下图所示,默认显示当前项目接入的“现场开发”类的全部数据表,可切换显示项目中“同步专网”或“产品部署”类数据表。其中:现场开发类表:可选择显示总数据表、...
通过质量规则管理页面,统一管理并设置各个逻辑表质量规则,方便用户查看以及设置所有逻辑表的质量规则。前提条件 已新建逻辑表,具体操作,请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑表。背景信息 如果逻辑...
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果,试跑 指对某个质量规则进行一次模拟执行,以检测规则的正确性和运行情况,试跑的结果不会在质量报告中显示;运行 指在特定时间内对质量规则进行检查,运行的结果会...
DataWorks的全流程数据质量监控功能为您提供35种预设表级别、字段级别和自定义的监控模板。数据质量帮助您第一时间感知到源端数据的变更与ETL(Extract Transformation Load)中产生的脏数据,自动拦截问题任务,有效阻断脏数据向下游蔓延...
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前,请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息(ods_user_info_d)同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
如果配置了质量规则的数据模型在开发环境场景画布中被引用,且场景画布中开启了自动质量规则校验开关,场景画布中会自动生成质量检测节点。当算法运行时,画布中引用的数据质量规则也会自动运行,以检查算法输出数据是否符合要求,可在物理...
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果,试跑 指对某个质量规则进行一次模拟执行,以检测规则的正确性和运行情况,试跑的结果不会在质量报告中显示;运行 指在特定时间内对质量规则进行检查,运行的结果会...
本文为您介绍如何通过数据质量实现表数据监控。前提条件 在进行本实验前,请确保已完成 采集数据 和 加工数据。已通过数据集成将存储于RDS MySQL的用户基本信息(ods_user_info_d)同步至MaxCompute的ods_user_info_d表。已通过数据集成将...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 质量规则(包括批量添加质量规则)新建质量规则 Y N N N Y N N 编辑质量规则 Y N N N Y N N 开启&暂停质量规则 Y N N N Y N N 删除质量规则 Y N N N...
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 质量规则(包括批量添加质量规则)新建质量规则 Y N N N Y N N 编辑质量规则 Y N N N Y N N 开启&暂停质量规则 Y N N N Y N N 删除质量规则 Y N N N...
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果,试跑 指对某个质量规则进行一次模拟执行,以检测规则的正确性和运行情况,试跑的结果不会在质量报告中显示;运行 指在特定时间内对质量规则进行检查,运行的结果会...
质量规则试跑和运行区别 试跑和运行的区别在于执行的方式和显示的结果,试跑 指对某个质量规则进行一次模拟执行,以检测规则的正确性和运行情况,试跑的结果不会在质量报告中显示;运行 指在特定时间内对质量规则进行检查,运行的结果会...
您可以通过对已创建的质量校验函数进行物理化操作,将质量校验函数存储至对应的云计算资源中,供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数,具体操作,请参见 新建质量校验函数。操作步骤 ...
在了解保障基于MaxCompute的数据仓库数据质量的方案后,您还需要进一步学习如何制定一套标准度量方案,以及判断质量监控方案是否合适业务需求以及如何改进。例如,针对每一个数据质量事件,必须分析原因和处理过程,制定后续同类事件预防...
数据质量 单击 数据质量>质量报告,展示数据表字段个数、质量检测字段数、质量检测规则数、质量评分和质量评分规则统计等。单击 质量评分说明,查看质量评分概述、质量评价维度分类和质量规则等。单击 评分趋势查看,通过评分趋势图了解该...
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义,方便用户在定义数据元或维度属性时进行质量规则引用,以支持后续对字段的质量规则的快速配置和校验。具体操作,请参见 新建质量校验函数 和 物理化质量校验函数。...
不限 OUT端口-输出参数 参数名 参数描述 输出数据类型 out 限幅输出 浮点数 输出质量码说明 输出质量码的处理方式如下:若输入质量码存在坏值,则输出质量码为0。若输入质量码均为好值,则输出质量码为192。注:质量码缺失或质量码类型为非...
新建质量校验函数并物理化 通过新建质量校验函数实现质量检测函数的自定义,方便用户在定义数据元或维度属性时进行质量规则引用,以支持后续对字段的质量规则的快速配置和校验。具体操作,请参见 新建质量校验函数 和 物理化质量校验函数。...
数据质量 单击 数据质量>质量报告,展示数据表字段个数、质量检测字段数、质量检测规则数、质量评分和质量评分规则统计等。单击 质量评分说明,查看质量评分概述、质量评价维度分类和质量规则等。单击 评分趋势查看,通过评分趋势图了解该...
您可以通过对已创建的质量校验函数进行物理化操作,将质量校验函数存储至对应的云计算资源中,供数据元、指标、维度使用。本文介绍如何物理化质量校验函数。前提条件 已存在质量校验函数,具体操作,请参见 新建质量校验函数。操作步骤 ...
质量统计功能可以查询指定AppID下质量总览数据以及质量分布数据。通过阅读本文,您可以了解质量统计的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>质量统计,进入质量统计界面。可选:选择待查询的AppID,单击 ...
是 不归零 不归零 归零 输出质量码说明 信号的输出质量码处理方式如下:若输入质量码缺失或质量码类型非数值,则输出质量码为-1。若输入质量码为坏值,则输出质量码为0。若输入质量码为好值,则输出质量码与输入质量码一致。说明 ①质量码...
是 min-max min-max Z-score 输出质量码说明 输出质量码的处理方式如下:若输入质量码缺失或质量码类型非数值,则输出质量码为-1。若输入质量码为坏值,则输出质量码为0。若输入质量码为好值,则输出质量码与输入质量码一致。说明 ①质量码...
当质量规则变更时,为使数据开发中生产场景中引用的规则同步更新生效,需要一键更新开发场景和生产场景中的质量规则,让用户使用更方便。前提条件 数据开发的生产场景中引用了质量规则,且引用的质量规则有变更,场景状态为 生产场景待更新...
通过质量规则管理页面,我们可以统一查看逻辑表的全部质量规则,方便用户对已创建的规则过滤、筛选查看。本文介绍如何查看逻辑表质量规则。前提条件 已存在规则,具体操作,请参见 新增逻辑表质量规则 或者 设置逻辑表质量规则。操作步骤 ...
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...
校验记录用于记录质量规则校验Dataphin数据表、全域数据表、指标、数据源和实时元表的结果并支持查看每一条质量规则的校验结果。权限说明 超级管理员、质量管理员可查看所有校验记录。项目成员可查看自己所加入的项目的校验记录。普通成员...
本文介绍如何查看质量评估任务结果。前提条件 已新建工作组“信息中心(xxzx)”,具体操作,请参见 新建工作组。已在工作组中分别添加数据源类型为MaxCompute、RDS MySQL的数据源,具体操作,请参见 新建云计算资源。已创建逻辑表,具体操作...
您可以使用图片质量评分功能检测图片的综合质量分数,通常用于封面图、低质量图片过滤等场景。重要 此文档已不再维护,建议您使用新版智能媒体管理。关于智能媒体管理新版与旧版的对比,请参见 新旧版本使用指引。关于新版智能媒体管理图片...
质量统计功能可以查询指定AppID下质量总览数据以及质量分布数据。通过阅读本文,您可以了解质量统计的查询方法。操作步骤 登录 音视频通信RTC控制台。在左侧导航栏选择 观星台>质量统计,进入质量统计界面。可选:选择待查询的AppID,单击 ...
经过第三方认证机构评定,IT系统不符合行业基础安全标准,商务合作伙伴认为该企业存在较大的潜在风险,决定终止商务合作。对于业务需重度依赖IT系统的企业,如游戏、在线教育、直播、电商等,IT风险治理就更加重要,否则可能就要遭受企业...
知识库能够帮助您针对具体的质量问题或某一类质量问题,沉淀相关解决方案,提高问题处理效率。本文为您介绍如何新建及管理知识库。权限说明 所有成员支持新建、查看知识库以及为知识库关联相关的质量规则;超级管理员、质量管理员支持编辑...