新建和管理公共标准属性
建议将在多个标准模板中都会重复使用且配置相同的属性配置为公共属性。本文介绍如何创建和管理公共标准属性。权限说明 超级管理员、数据标准管理员支持新建及管理公共标准属性。公共属性概述 公共属性分为 自定义属性 和 系统属性 两种：...
新建和管理公共标准属性
建议将在多个标准模板中都会重复使用且配置相同的属性配置为公共属性。本文介绍如何创建和管理公共标准属性。权限说明 超级管理员、数据标准管理员支持新建及管理公共标准属性。公共属性概述 公共属性分为 自定义属性 和 系统属性 两种：...
功能更新动态（2023年）
校验来源表和目标表的重复性。新增Salesforce输入组件，可离线抽取Salesforce实例中的数据。整库迁移新增FTP作为来源库，通过上传并解析Excel文件（.xlsx格式）的指定格式，批量创建FTP文件同步任务。FTP输入组件支持通过指定来源文件中的...
积分互动
说明：所有活动的效果分析-参与明细中的批量打标，标签是参与门店所在区域的标签集（标签为开启且可修改的状态），且为活动参与门店均可用的标签。1 活动看板 在活动日历上展示活动数量，并展示今日活动，及近3天即将开始的活动。2 积分...
文件核对
核对方式：支持 明细核对、汇总核对、自校验核对 三种方式。明细核对：端到端明细一一核对。汇总核对：针对统计字段做汇总核对。自校验核对：单文件针对文件头和文件体对应字段做汇总核对。描述：规则的备注信息，选填，最大长度为 500 个...
管理数据安全待发布对象
异常提醒：为您展示部分校验项的异常明细。识别结果 ①筛选与搜索区 您可通过识别结果的数据表名称进行模糊搜索，也可根据表类型、变更时间、变更人、发布状态、变更类型、环境变更进行精确筛选。②列表区 为您展示识别结果的数据表名称、...
管理数据安全待发布对象
异常提醒：为您展示部分校验项的异常明细。识别结果 ①筛选与搜索区 您可通过识别结果的数据表名称进行模糊搜索，也可根据表类型、变更时间、变更人、发布状态、变更类型、环境变更进行精确筛选。②列表区 为您展示识别结果的数据表名称、...
身份证核验初始化
CallbackToken String 否 NMjvQanQgplBSaEI0sL86WnQplB 安全Token，用于防重复、防篡改校验。如果传入该参数会在回调地址显示CallbackToken字段。返回数据 名称 类型 是否必选 示例值 描述 RequestId String 是 130A2C10-B9EE-4D84-88E3-...
InitSmartVerify
CallbackToken String 否 NMjvQanQgplBSaEI0sL86WnQplB 安全Token，用于防重复、防篡改校验。如果传入该参数会在回调地址显示CallbackToken字段。返回数据 名称 类型 是否必选 示例值 描述 RequestId String 是 130A2C10-B9EE-4D84-88E3-...
银行卡核验初始化
CallbackToken String 否 NMjvQanQgplBSaEI0sL86WnQplB 安全Token，用于防重复、防篡改校验。如果传入该参数，会在回调地址显示 CallbackToken 字段。返回数据 名称 类型 是否必选 示例值 描述 RequestId String 是 130A2C10-B9EE-4D84-88E...
InitSmartVerify
CallbackToken String 否 NMjvQanQgplBSaEI0sL86WnQplB 安全Token，用于防重复、防篡改校验。如果传入该参数会在回调地址显示CallbackToken字段。返回数据 名称 类型 是否必选 示例值 描述 RequestId String 是 130A2C10-B9EE-4D84-88E3-...
变更日志
扫描和上报过程对重复的模型进行校验和提示。支持枚举上报后再通过QuickFix生成。支持类型长度过长提示。Changed 调整扫描代码为模型、同步平台模型和上报模型到平台的行为，互斥且防重复点击，避免用户误操作。用户查看菜单调整展示条件，...
路径分析函数
Hologres的路径分析函数（包括路径明细函数和路径解析函数）能够高效处理路径计算任务，进行路径明细计算和结果解析，并将记录的数据应用于生成桑基图展示，帮助您更好地理解和可视化复杂的路径信息。本文为您介绍路径明细函数和路径解析...
任务防重复提交
函数计算 会对您重复提交的任务进行校验，当有相同ID进入系统时，该次请求将认为是重复提交而被拒绝，并返回错误 409。说明 函数计算 还提供了 RequestID 这一概念，如果您设置了 RequestID 但未设置 TaskID，系统将自动设置 TaskID 为 ...
批量上传质量规则
参数 描述 校验结果 可查看校验结果的总条数、校验成功条数、校验失败条数（包括表、字段、数据分类）、重复数据-与线上重复的条数、重复数据-本次上传的重复条数。下载校验结果 支持全量下载本次上传并携带校验结果的文件。存在校验失败 ...
批量上传质量规则
参数 描述 校验结果 可查看校验结果的总条数、校验成功条数、校验失败条数（包括表、字段、数据分类）、重复数据-与线上重复的条数、重复数据-本次上传的重复条数。下载校验结果 支持全量下载本次上传并携带校验结果的文件。存在校验失败 ...
任务去重
函数计算 会对您重复提交的任务进行校验，当有相同ID进入系统时，该次请求将认为是重复提交而被拒绝，并返回错误 409。说明 函数计算 还提供了 RequestID 这一概念，如果您设置了 RequestID 但未设置 TaskID，系统将自动设置 TaskID 为 ...
Quick BI的仪表板中的明细表翻页时，不更新数据，数据...
问题描述 Quick BI以impala数据库为数据源，查看仪表板中明细表翻页后的数据时，数据未更新，数据一直重复。问题原因 impala数据源如果没有排序的话，查询会随机返回数据，没有一定的顺序，所以会造成数据重复。解决方案 在明细表的字段中...
配置HTTP响应头
跨域校验规则 重要 是否允许重复 和 跨域验证 这两个配置项之间存在互斥，是否允许重复 配置为 允许 的情况下，跨域校验将会失效。任意匹配：自定义响应头参数“Access-Control-Allow-Origin”的值设置为“*”不论用户请求里面是否携带...
BatchCheckVehicleDevice
RepeatedDeviceNameList List {"RepeatedDeviceNameList":["abcd","asdf"]} GB/T 32960协议或SL 651协议云网关设备信息校验失败时，返回的重复设备名称的列表。ErrorMessage String 系统异常 调用失败时，返回的出错信息。Success Boolean ...
BatchCheckImportDevice
RepeatedDeviceNameList List {"RepeatedDeviceNameList":["abcd","asdf"]} 设备信息校验失败时，返回的重复设备名称的列表。ErrorMessage String 系统异常 调用失败时，返回的出错信息。RequestId String E4C0FF92-2A86-41DB-92D3-73B...
创建核对规则
核对方式：支持 明细核对、汇总核对、自校验核对 三种方式。明细核对：端到端明细一一核对。汇总核对：针对统计字段做汇总核对。自校验核对：单文件针对文件头和文件体对应字段做汇总核对。描述：规则的备注信息，选填，最大长度为 500 个...
验收报告模板
测试验收点 序号 测试验证点（按实际情况增减）是否通过 1 数据主键是否重复。2 结果数据的明细分布，包括数据量、空值、均值及其他相关业务指标的分布。3 抽样检查：与需求设定时的抽样样本进行对比，查看是否存在差异。4 如果是迭代需求...
配置跨域资源共享
重要 是否允许重复 和 跨域验证 这两个配置项之间存在互斥，是否允许重复 配置为 允许 的情况下，跨域校验将会失效。跨域验证 开启 说明 跨域验证 只有在 响应头操作 为 增加，自定义响应头参数 为“Access-Control-Allow-Origin”的时候才...
基本概念
例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键是否重复抽象为质量规则。强规则 质量规则的校验结果对下游节点会造成较大影响。当强规则校验结果为异常时，下游节点的运维调度会自动停止，同时当前节点...
基本概念
例如，如果您需要关注某个表中的行数变化及主键是否重复，则您可以将行数变化和主键是否重复抽象为质量规则。强规则 质量规则的校验结果对下游节点会造成较大影响。当强规则校验结果为异常时，下游节点的运维调度会自动停止，同时当前节点...
数据加工过程卡点校验
本文为您介绍在线或离线业务系统的数据在生成过程中进行的卡点校验。在线系统卡点校验 在线业务系统产生的数据是数据仓库的重要数据来源。在线业务系统复杂多变，每次变更都会产生数据的变化。因此，数据仓库需要适应多变的业务发展，及时...
资产质量概述
支持对 指标 的字段分组个数、字段重复值个数、字段稳定性及字段波动性进行监控、异常报警及整改。支持对 数据源 的连通性和表结构异动进行监测、异常报警及整改。支持对 实时元表 进行统计值检测、实时离线对比和实时多链路对比、异常报警...
资产质量概述
支持对 指标 的字段分组个数、字段重复值个数、字段稳定性及字段波动性进行监控、异常报警及整改。支持对 数据源 的连通性和表结构异动进行监测、异常报警及整改。支持对 实时元表 进行统计值检测、实时离线对比和实时多链路对比、异常报警...
输入数据
重复步骤 2~3，可以配置多个数据输入节点。说明 配置多个数据输入节点时，选择数据源可以是同一个数据库，也可以是不同数据库。最多支持添加5个数据输入节点。输入数据后，您可以对输入数据进行清洗加工，形成任务流。请参见 数据加工。
账单详情-明细账单升级公告
具体为：【备注】字段不再重复记录【单价因子】【计费因子】字段中已有信息，比如产品明细为云盘（yundisk）的“数据盘种类”，共享带宽（后付费）（cbwp）的“线路类型”等信息。本次升级涉及的数据入口：用户中心-账单详情-明细账单，...
升级评估
为了保证升级链路的顺利进行以及更好的升级体验，PolarDB 为大版本升级提供了升级评估功能，您可以在开始升级前，对集群状态、升级任务依赖、源集群属性信息等前提条件进行预校验，提前发现影响升级进度的前置条件并处理，以降低升级过程中...
迁移评估
为了保证迁移链路的顺利进行以及更好的迁移体验，PolarDB 提供了迁移评估功能，您可以在开始迁移前，对实例状态、迁移任务依赖、源实例属性信息等前提条件进行预校验，提前发现影响迁移进度的前置条件并处理，以降低迁移过程中的处理成本和...
MaxCompute账单用量明细分析
步骤二（可选）：上传用量明细数据至MaxCompute 说明 如果您期望通过MaxCompute SQL进行用量明细分析，则需要参考本步骤将用量明细导入MaxCompute；如果您只希望使用Excel进行用量明细分析，则无需进行此步骤。使用MaxCompute客户端...
查看数据校验详情
本文介绍如何查看数据传输服务DTS（Data Transmission Service）数据校验任务的详情。前提条件 已创建并配置数据校验任务，详情请参见 配置数据校验。注意事项 在DTS同步或迁移实例中配置的校验任务，支持在实例详情和校验任务列表查看；...
大版本升级常见问题
源实例无主键表校验 源PolarDB集群存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源PolarDB集群上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name ...
配置数据校验
本文介绍如何使用数据传输服务DTS（Data Transmission Service）配置数据校验任务，帮助您监控源库与目标库数据的差异。您可以在同步或迁移实例的 高级配置 阶段选择相应的 数据校验方式，或者单独配置数据校验任务，以便及时发现数据不...
校验接口
接口校验页面展示了当前接口所有适用组件的接口校验状态，包括校验通过、校验失败、未校验、校验中四种状态。对于校验中的组件，可中断校验。一旦退出页面或中断校验，则校验中的组件将不再运行。对于校验失败的组件，可将鼠标悬浮在状态...
常见问题
源实例无主键表校验 源RDS实例存在没有主键的表，同步数据后可能会导致目标数据库中出现重复数据。您可以通过在源RDS实例上通过高权限账号连接数据库，并执行如下SQL，查询没有主键的表：SELECT t1.table_schema,t1.table_name FROM ...
数据校验计费方式
按抽样比例进行HASH校验 的校验模式计费标准与源数据库实例的地域、目标数据库实例的地域、校验的数据量（含单次校验的数据量和校验的次数）等因素有关，详情请参见下表。重要 实际费用请以购买页面和账单为准。数据迁移实例中的全量校验...
- 产品推荐
- 这些文档可能帮助您