ListQualityResultsByEntity
调用ListQualityResultsByEntity，根据分区表达式查询历史校验结果。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 ...
开放API 调用和状态码
特定业务参数校验失败，比如参数内容不符合接口要求、或者JSON和RepeatList格式的入参，不满足接口要求。增加URL、域名、字符串格式合法性校验。账户验证失败 400 账户欠费。余额不足。风控问题。业务失败的错误码统一使用400。无权操作 ...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
配置规则：按模板（批量）
如果被校验的业务主体为离线数据，则业务日期通常为执行校验操作的前一天。CheckResult Integer 2 校验结果。MatchExpression String ds=$[yyyymmdd]分区表达式。CheckerType Integer 0 校验器的类型。ProjectName String autotest 需要...
API 授权
客户端发起对后端业务 API B 的请求时，MGS 会根据 API 授权配置从该请求 Header 或 Cookie 中取出授权参数放到 Context 里然后调用业务 API B 关联的授权 API A，授权 API A Server 需要根据 Context 中的参数做业务权限校验。如校验合法...
数据加工过程卡点校验
本文为您介绍在线或离线业务系统的数据在生成过程中进行的卡点校验。在线系统卡点校验 在线业务系统产生的数据是数据仓库的重要数据来源。在线业务系统复杂多变，每次变更都会产生数据的变化。因此，数据仓库需要适应多变的业务发展，及时...
查看Dataphin数据表校验记录
数据板块 数据表所属的业务板块。所属项目 数据表所属的项目。操作 单击 图标或表名，可进入查看校验详情页面，详情请参见 Dataphin数据表校验记录详情。单击 图标，可进入查看质量报告页面。在执行中的校验对象，您可单击停止 图标，终止...
查看Dataphin数据表校验记录
数据板块 数据表所属的业务板块。所属项目 数据表所属的项目。操作 单击 图标或表名，可进入查看校验详情页面，详情请参见 Dataphin数据表校验记录详情。单击 图标，可进入查看质量报告页面。在执行中的校验对象，您可单击停止 图标，终止...
查看指标校验记录
数据板块 指标所属的业务板块。所属项目 指标所属的项目。操作 单击 图标或表名，可进入查看校验详情页面，详情请参见 指标校验记录详情。单击 图标，可进入查看质量报告页面。在执行中的校验对象，您可单击停止 图标，终止质量规则校验...
查看指标校验记录
数据板块 指标所属的业务板块。所属项目 指标所属的项目。操作 单击 图标或表名，可进入查看校验详情页面，详情请参见 指标校验记录详情。单击 图标，可进入查看质量报告页面。在执行中的校验对象，您可单击停止 图标，终止质量规则校验...
数仓规划权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 查看数据板块列表-Y 查看数据板块详情 Y Y N N N N N 新建数据板块 Y Y N N N N N 编辑数据板块 Y Y N N N 负责板块的 N 删除数据板块 Y Y N N N ...
数仓规划权限列表
权限点 超级管理员 系统管理员 数据源管理员 安全管理员 质量管理员 板块架构师 普通成员 查看数据板块列表-Y 查看数据板块详情 Y Y N N N N N 新建数据板块 Y Y N N N N N 编辑数据板块 Y Y N N N 负责板块的 N 删除数据板块 Y Y N N N ...
注册风险识别功能及参数说明
重要 以下服务事件参数中，为最大化适配各类入参情况，阿里云风险识别服务不对入参的字符串进行业务格式校验，您需要自行对数据业务格式进行校验。例如，mobile字段，需接口请求方对入参是否符合中国内地手机号业务格式（11位纯数字、1开头...
登录风险识别功能及参数说明
登录风险识别帮助企业保护具有高价值资产的用户账户，例如业务会存有余额、银行卡、积分、信用额度等，防止恶意攻击手段造成的盗号资损、客诉及口碑下降。版本介绍 为匹配不同行业、不同阶段企业的风控需求，登录风险识别分为基础版、增强...
营销风险识别功能及参数说明
重要 以下服务事件参数中，为最大化适配各类入参情况，阿里云风险识别服务不对入参的字符串进行业务格式校验，您需要自行对数据业务格式进行校验。例如，mobile字段，需接口请求方对入参是否符合中国内地手机号业务格式（11位纯数字、1开头...
Dataphin中如何对表中字段进行校验、质量核查
逻辑汇总表是归属在业务板块中，在给逻辑汇总表创建规则时，不要选择所属项目。Dataphin专有云如果没有该功能，可以联系阿里人员进行定制。质量规则存在。1.在首页>资产>质量>数据表规则>创建质量规则创建数据表字段质量校验规则。2.设置...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
质量规则模板类型
数据表/指标模板类型 模板分类 模板说明 完整性 字段空值校验 用于对单字段是否是空值进行校验。字段空字符串校验 用于对单个字段是否是空字符串进行校验。唯一性 字段唯一性校验 用于对单字段唯一值/非唯一值进行校验。字段分组个数校验 ...
创建数据板块
数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，当前租户还需开通智能研发模块。在开始执行操作前...
创建数据板块
数据板块是逻辑空间的重要组成部分，是基于业务特征划分的命名空间。在使用规范建模前，您需要完成数据板块的创建。本文为您介绍如何新建数据板块。前提条件 仅支持 智能研发版。若需使用，请升级当前版本。升级版本，请参见 升级。在开始...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
模型效果评测
人工校验 任务执行完成后，进行人工校验，此时通用模型的准确率为100%，通过对每句话进行人工校验，也就是人工听取录音确认每句话转写的文本是否正确，校验时如果转写有误需要您填写正确的文本，这样一来，系统就可以根据转写正确的文字...
模型效果评测
人工校验 任务执行完成后，进行人工校验，此时通用模型的准确率为100%，通过对每句话进行人工校验，也就是人工听取录音确认每句话转写的文本是否正确，校验时如果转写有误需要您填写正确的文本，这样一来，系统就可以根据转写正确的文字...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
规范定义最佳实践
基于Dataphin建模理论和业务需求，明确并规范定义统计指标，以便设计出易于业务使用的数据仓库。背景信息 规范定义是指以维度建模作为理论基础，构建总线矩阵，划分并定义主题域、业务过程、维度、原子指标、统计周期和派生指标。在您开始...
新建及管理质量规则模板
有效性 包括 数据标准码表参照对比（需开通数据标准模块）、码表参照对比、字段格式校验、字段值域校验、字段长度校验。一致性 包括 单字段业务逻辑一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较、单表字段统计值一致...
新建及管理质量规则模板
有效性 包括 数据标准码表参照对比（需开通数据标准模块）、码表参照对比、字段格式校验、字段值域校验、字段长度校验。一致性 包括 单字段业务逻辑一致性比较、两表字段统计值一致性比较、两表字段业务逻辑一致性比较、单表字段统计值一致...
校验接口
接口校验的目的是测试配置的接口是否可用，由前端通过对请求接口的数据和适用业务组件的 Schema 进行适配来完成校验。只有经过校验且对当前组件有效的接口才有用。因此，在使用组件搭建页面前，需要事先对组件涉及的接口进行有效性验证。...
配置数据质量监控
ods_user_info_d 对每日同步的用户信息数据进行表行数非0校验（强规则）和业务主键唯一性校验（弱规则），避免后续无效加工，及时止损。dwd_log_info_di 不单独进行监控。dws_user_info_all_di 不单独进行监控。ads_user_info_1d 对每日...
创建指标质量规则
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
创建指标质量规则
Dataphin支持创建校验指标的质量规则，提升指标质量监控的便捷性。本文为您介绍如何配置指标质量规则。前提条件 已经添加监控对象才可配置质量规则，如何添加监控对象，请参见 添加监控对象。权限说明 超级管理员、质量管理员和指标负责人...
附录：消息格式
数据质量校验结果反馈事件 dataworks:DqcCheck:DqcCheckFinishedEvent 数据质量校验完成 消息实体格式：数据质量校验完成事件 dataworks:ProjectChange:DeleteProject 租户删除项目空间前置事件 消息实体格式：租户删除项目空间前置事件 ...
新建质量校验函数
当业务需要比较复杂的字段值域校验规则时，系统支持上传自定义函数，用来校验字段的内容规范，通过新建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。本文以基于资源的...
新建质量校验函数
当业务需要比较复杂的字段值域校验规则时，系统支持上传自定义函数，用来校验字段的内容规范，通过新建质量校验函数，方便用户在定义数据元或维度属性时进行质量规则引用，以支持后续对字段的质量规则的快速配置和校验。本文以基于资源的...
配置数据质量监控
ods_user_info_d 对每日同步的用户信息数据进行表行数非0校验（强规则）和业务主键唯一性校验（弱规则），避免后续无效加工，及时止损。dwd_log_info_di 不单独进行监控。dws_user_info_all_di 不单独进行监控。ads_user_info_1d 对每日...
创建主题域
主题域由数据域升级而来，用于存放同一数据板块内不同意义的指标，如商品域、交易域、会员域等。...后续步骤 完成数据板块的主题域创建后，即可为该数据板块创建业务实体（业务对象或业务活动），详情请参见 创建并管理业务实体。
创建主题域
主题域由数据域升级而来，用于存放同一数据板块内不同意义的指标，如商品域、交易域、会员域等。...后续步骤 完成数据板块的主题域创建后，即可为该数据板块创建业务实体（业务对象或业务活动），详情请参见 创建并管理业务实体。
数据校验计费方式
按抽样比例进行HASH校验 的校验模式计费标准与源数据库实例的地域、目标数据库实例的地域、校验的数据量（含单次校验的数据量和校验的次数）等因素有关，详情请参见下表。重要 实际费用请以购买页面和账单为准。数据迁移实例中的全量校验...
- 产品推荐
- 这些文档可能帮助您