创建实时元表规则
校验配置 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置...
创建实时元表规则
校验配置 数据质量规则校验后，结果会和异常校验的配置进行对比，符合条件则校验结果为不通过；同时触发告警等后续流程。异常校验可用指标由模板和配置内容决定，支持多种条件的and/or条件，实际配置中建议小于3条。详情请参见 校验配置...
TDE透明数据加密
Page落盘之前必定需要计算校验和，即使校验和相关参数关闭，也会调用校验和相关的函数 PageSetChecksumCopy 或 PageSetChecksumInplace。所以，只需要计算校验和之前加密Page，即可保证用户数据在存储上是被加密的。解密模块 存储上的Page...
TDE透明数据加密
Page落盘之前必定需要计算校验和，即使校验和相关参数关闭，也会调用校验和相关的函数 PageSetChecksumCopy 或 PageSetChecksumInplace。所以，只需要计算校验和之前加密Page，即可保证用户数据在存储上是被加密的。解密模块 存储上的Page...
基础版一键升级专业版
Nacos专业版比基础版性能提升10倍，且支持配置加解密、服务及配置轨迹推送功能。...前提条件 开通MSE。创建MSE实例。...同步双写和校验过程依据实例规模大小会有所不同，一般持续5～20分钟。如果出现该问题，请等待一段时间后重试。
升级引擎版本
Nacos引擎类型分为专业版和开发版（基础版已停止售卖及功能更新），同时Nacos有自身的引擎版本。本文介绍如何在MSE控制台上升级...同步双写和校验过程依据实例规模大小会有所不同，一般持续5～20分钟。如果出现该问题，请等待一段时间后重试。
配置集成管道质量监控
通过离线集成管道质量监控，Dataphin会自动为您监控数据表的质量，如果数据表有质量风险，系统会自动报警，通知告警接收人，帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...
配置集成管道质量监控
通过离线集成管道质量监控，Dataphin会自动为您监控数据表的质量，如果数据表有质量风险，系统会自动报警，通知告警接收人，帮助您及时了解数据表质量状况。本文为您介绍如何配置质量规则。权限说明 项目开发者支持创建集成任务、配置质量...
迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle...
转换后可以确保源端不同字符集中的数据能成功迁移至目标端，但割接后反向增量可能会出现数据超长无法写回源端的问题。如果源端存在包含时区信息的数据类型（例如 TIMESTAMP WITH TIME ZONE），请您确保目标端数据库支持并存在源端对应的...
使用Tapdata Cloud导入MySQL数据
数据校验 打开 数据校验 开关后，任务会自动对同步结果的一致性进行全量校验和增量校验，并会在运行监控页面展示校验不一致的数据行数。重要 当任务符合以下任意一种情况时，即使打开 数据校验 开关，任务也不会进行校验。添加了中间处理...
GetSecretValue
说明 如果同时输入 VersionStage 和 VersionId，系统会校验是否存在 VersionStage 和 VersionId 都对应的凭据值，存在则返回对应的凭据值，否则返回参数错误。VersionId String 否 00000000000000000000000000000001 版本号。如果指定该...
新建及管理质量规则模板
自定义SQL 包括 自定义统计指标校验 和 自定义数据详情校验。不同类型模板的使用场景，请参见 模板类型说明。数据源类型 模板需要指定支持的数据源类型，避免不同数据源语法结构不一致导致规则定义不生效或校验结果异常产生误告警。支持...
新建及管理质量规则模板
自定义SQL 包括 自定义统计指标校验 和 自定义数据详情校验。不同类型模板的使用场景，请参见 模板类型说明。数据源类型 模板需要指定支持的数据源类型，避免不同数据源语法结构不一致导致规则定义不生效或校验结果异常产生误告警。支持...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
查看并管理治理工作台
您可以在治理工作台查看数据质量在校验过程中的出错情况及针对该质量校验问题发起整改、忽略、通知等治理操作，从而实现资产质量从制定计划到实现整改的PDCA完整流程，有效提升数据质量。本文为您介绍如何查看并管理治理工作台。权限说明 ...
数据质量概述
并可以将质量监控规则与调度节点进行关联，当任务运行完成后便会触发质量规则校验，帮助您第一时间感知问题数据，按需设置规则的强弱来控制任务是否失败退出，从而避免脏数据影响扩大，有效降低数据恢复处理的时间成本和费用成本。...
基础信息校验
App备案目前只支持PC端操作。认领备案和导入备案需要在PC端操作。...单击 开始备案，进入 基础信息校验 页。根据提示填写主办者信息和互联网信息服务。网站基础信息填写。...说明 如果系统无法显示您的实际...更多常见问题请参见 基础信息校验FAQ。
请求完整性校验失败异常
热修复新接入用户，如果IDSECRET，APPSECRET，RSASECRET 以及包名和阿里控制台不一致，也会出现此打印此错误日志。解决方案 检查appkey，包名，密码等参数：如果正常，重新打一个补丁测试。如果仍然失败，请联系 技术支持。适用于 移动热...
什么是在线迁移服务
写入目的端数据会产生请求费（写入和校验请求），该费用由目的端存储服务提供商在目的端收取。阿里云OSS的费用详情，请参见 计费概述。对于归档类型的数据，需要您提前进行解冻操作，待解冻完成后再创建迁移任务。解冻操作会收取数据取回的...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
查看并管理整改流程
重新校验：仅待处理、已忽略可重新校验，发起重新校验后，如果数据质量问题已经处理，可以重新执行校验规则，会按照执行后的校验状态修改治理项状态：校验不通过-未处理，校验通过-已处理。关联知识库文档：规则关联知识后，可在质量规则和...
设计方案
容错 容错是指在分布式系统中，系统出现故障时，通过设计和实现可靠的机制和策略，使系统能够自动检测、排除或者纠正错误，保证系统能够正常运行，从而提高系统的可靠性和稳定性。容量 容量是在一定时间内，系统能够处理的最大工作量或数据...
外呼机器人常见问题解决方式
3）检查当前业务是否有绑定外呼号码（一般控制台内发起外呼时会进行校验业务下号码，但代码上传过程中会出现此状况）；到号码管理中查看号码绑定情况。4）检查当前业务并发是否为0，业务并发为0时任务也无法正常发起；4、业务管理中，新建...
配置远程鉴权
系统会对您输入的鉴权服务器地址进行校验，包括格式校验和值校验。格式要求 鉴权地址支持HTTP协议和HTTPS协议，格式请参考以下几种类型：http://example.com/auth https://example.com/auth http://192.0.2.1/auth https://192.0.2.1/auth ...
什么是数据校验
优势 全量校验、增量校验和结构校验均支持在不停服的情况下进行校验。支持异构数据库间的校验。全量校验任务对源和目标库的行级数据字段校验；增量校验对源的增量数据进行源和目标库的一致性校验。任务运行过程中如果有数据不一致的数据，...
Dataphin为什么数据质量规则都是开启的校验记录里还是...
问题描述 Dataphin为什么数据质量规则都是开启的校验记录里还是没有数据。问题原因 校验记录查询界面默认是当天的记录，需要查询日期和校验日期匹配。解决方案 在校验记录查询操作时按需要查询对应的日期。适用于 Dataphin 当前环境：独立...
什么是数据校验
优势 全量校验、增量校验和结构校验均支持在不停服的情况下进行校验。支持异构数据库间的校验。全量校验任务对源和目标库的行级数据字段校验；增量校验对源的增量数据进行源和目标库的一致性校验。任务运行过程中如果有数据不一致的数据，...
为HTTP触发器配置JWT认证鉴权
常见问题 为什么触发器开启JWT鉴权之后，访问函数提示：invalid or expired jwt？该提示说明JWT鉴权失败，可能原因如下。您的Token签名、格式等非法，导致校验出错。您的Token已过期，导致校验出错。您的Token中的 kid 与您在触发器中配置...
微信小程序访问CDN证书校验失败
解决方案 在Android端微信小程序端访问CDN的证书出现校验失败的情况，而在其他的浏览器中测试均是正常的，排查中间证书是否存在问题。查看其证书链是否完整，如果完整，说明不是证书链问题。排查是否是SNI问题导致的该问题，抓取Android...
配置化规约扫描
下图为执行规约扫描验证的截图示例：在Editor中即时校验 在Editor编辑过程中，界面会显示即时校验反馈。配置管理 在项目下方的 配置管理 页签，列出了项目中的规约扫描配置信息，同时也支持通过双击或右击菜单跳转。在规约扫描配置有变动时...
查看数据校验详情
若增量任务包含多个增量子任务（例如MongoDB之间的实例迁移），当所有子任务的延迟都小于2秒时，开始进行全量校验和增量校验。为什么增量校验任务的结果一直是空的？增量校验任务仅记录存在不一致数据的库表信息。若源库出现增量数据，同步...
V5.1.x系列实例版本说明
解决DISTINCT在部分跨库JOIN场景下会出现报错的问题。修复分库分表情况下聚合函数查询带LIMIT时返回结果不正确的问题。解决BigDecimal类型在类型转换过程会消耗大量CPU的问题。修复SHOW FULL STATS连接数不准确的问题。修复SHOW FULL STATS...
进入数据质量概览（新版）
数据质量概览为您展示当前工作空间下，需要重点关注的数据质量总览指标、实例运行后触发的质量规则校验状态的趋势及分布情况、TOP质量问题表及质量问题责任人、质量规则覆盖保障情况等，帮助质量负责人快速了解工作空间数据质量整体情况，...
批量上传时空值未校验直接上传成功什么原因
问题描述 Quick BI数据填报设置了必填项，批量上传时空值未校验直接上传成功什么原因。问题原因 用户上传的Excel的空值不是真的为空，Excel单元格中填写的是空格字符，校验空格字符也是不为空的，因此上传是成功的。解决方案 Excel为空的...
获取离线MQTT消息
为了简化离线消息获取机制，云消息队列 MQTT 版 系统在客户端成功建立连接并通过权限校验后，会自动加载离线消息并下发到客户端。注意事项 客户端建立连接后，需要通过权限校验才能自动加载离线消息。例如，若您使用的是Token验证的方式，...
启动数据解析任务
若校验失败，则出现报错。根据提示修正配置后，重新启动。（可选）单击页面右上角的 停止，可停止数据解析，然后可以重新配置数据解析任务。对于重新配置后的数据解析任务，可参照上述步骤，重新进行上线。执行结果 返回 数据服务>数据解析...
时序引擎版本说明
修复并发更新Schema时会出现大量版本冲突的问题。修复Lindorm ML时序预测在预测条件为大于或小于某时间点时，拉取数据不足的问题。修复Lindorm ML时序异常检测ostl-ttest算法和ostl-esd在数据量较大时会报错的问题。优化Lindorm ML时序异常...
批量创建质量规则
数据表：当 规则模板 选择 稳定性-表稳定性校验 和 稳定性-表波动性校验 时，支持表级配置。对象选择 只需勾选数据表。数据源：当 规则模板 选择 稳定性-表结构异动监测，支持表级配置。对象选择 需勾选数据表。单击 下一步。单击 取消 后...
- 产品推荐
- 这些文档可能帮助您