质量规则模板类型
跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于对表/分区的大小、行数的稳定性进行校验，统计结果和固定值进行比较。表波动性校验 用于对表/分区的大小、行数的...
质量规则模板类型
跨源两表字段统计值一致性比较 用于对跨数据源的两个表两个字段的复杂业务逻辑是否正确进行校验。稳定性 表稳定性校验 用于对表/分区的大小、行数的稳定性进行校验，统计结果和固定值进行比较。表波动性校验 用于对表/分区的大小、行数的...
多表连接
连接条件 连接条件指定了两张数据表之间使用哪些字段进行连接，当数据表中某条数据（假定为a）的所有连接字段的值与另一张数据表某条数据（假定为b）的所有连接字段的值相同，则这a、b两条数据成功连接。多表连接算子支持指定多张数据表...
空间关联
用途 空间关联算子可以将两张数据表中的几何字段根据指定的空间关系进行属性关联。适用场景 计算链路 计算引擎 是否支持 离线 PostgreSQL 是 Polar_PG 是 AnalyticDB PostgreSQL(ADB_PG)是 使用说明 来源节点 空间关联算子必须指定2个 来源...
通过日志服务导入至数仓版
左边文本框为日志字段名称，右边为AnalyticDB MySQL数据库表中的字段。说明 Timestamp类型的字段映射精确到秒级别。例如日志时间为2022-01-05 10:12:13.145，投递到AnalyticDB MySQL后，投递结果为2022-01-05 10:12:13。投递开始时间 配置...
数据注册与字段配置
os 否 可以根据此维度字段过滤对应的指标 metric_name 指标的名称，比如 pv,uv,ctr 等 是 metric_value 指标的值 是 float64 值 dt 日期字段 是 格式：yyyyMMdd hh 小时字段 否 24小时制，00~23 mm 分钟字段 否 00~59 结果表字段基本都是...
横向虚拟关联
建模的数据输入分别位于己方和对方的数据库中，对字段进行匹配对齐。组件截图 二、参数说明 参数名称 参数说明 选择保留字段 选择参与方1和参与方2的匹配字段，用于后续横向建模。默认按字段名称（忽略大小写）自动匹配。字段别名默认使用...
SQL数据类型映射
SQL中所用字段对应于表中同名字段，两者的数据类型必须相匹配。本文介绍了SQL中字段数据类型、数据表中字段数据类型和多元索引中字段数据类型的映射关系。使用SQL过程中请确保SQL中和数据表中字段数据类型相匹配。重要 SQL中主键列的数据...
DB-IN
使用流程说明 先在“数据源管理”页定义好数据源连接信息，然后将组件拖入画布，选择相应数据源的表字段。参数说明 DB-IN算法组件的OUT端口-输入参数。参数名 描述 默认值 范围 数据源选择“数据源管理”的所有数据源都会在此列出 无 无 ...
查询报错问题
查询提示错误 META_COLUMN_NOT_EXIST 在分析型数据库MySQL版表新增字段后，查询提示找不到新添加的列，具体是什么原因？表正在上线，但是上线失败或者CN副本在重启，都有可能出现 META_COLUMN_NOT_EXIST。对于普通表 一级普通表：新增字段...
配置流程
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
配置Kafka输出组件
当写入模式为JSON时，目标表字段名将决定源端读取记录的列值在JSON结构中的字段名，例如源头表字段有两列，值为a和b，目标表字段配置为col1和col2，那么写入Kafka的记录Value为字符串{"col1":"a","col2":"b"}。单击 确认，完成Kafka输出...
配置离线数据集成节点
功能特性 不限制来源表和目标表数据库类型。支持字段映射，包含修改源表和目标表字段的命名和类型映射。可配置并发迁移数据。支持通过WHERE语句，对迁移数据进行预过滤。支持前置及后置SQL语句，在导入数据前后实现数据处理。使用限制 系统...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
配置逻辑表关联字段标准
说明 逻辑表对应字段关联数据标准中的值后，如果确认用标准字段的名称覆盖当前逻辑表字段的名称，则单击 确认 后，逻辑表中该字段的名称会自动更改为数据标准中对应的数据元、指标、或者维度的code值，例如：逻辑表中的手机号码原始字段...
任务导出
同时，在设置导出字段的时候，也可以直接拖动调整字段的排序，排序和导出的表头字段对应。二、项目任务导出 在项目中点击任务面板右上角的三个点，即可看到「导出任务」的操作按钮，支持三种导出方式。自定义表头字段导出当前筛选条件下的...
匹配条件说明
支持的匹配字段 下表描述了匹配条件中支持使用的匹配字段。匹配字段 适用的逻辑符 字段描述 URI 等于、不等于 等于多值之一、不等于任一值 包含、不包含 包含多值之一、不包含任一值 长度等于、长度大于、长度小于 前缀匹配、后缀匹配 正则...
通过Flink SQL模式配置ETL任务
例如A表中包含字段1、字段2和字段3，B表中包含字段2、字段3和字段4，对两张表通过做JOIN操作后，需要输出字段2和字段3，则需要在目标库侧创建做JOIN操作后的C表，C表中包含字段2和字段3。由于ETL功能暂不支持全量数据同步，所以您只能对...
数据类型映射
多元索引的字段值来源于数据表中同名字段的值，两者的数据类型必须相匹配，多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下表。注意 表中的类型必须一一对应，否则数据会被当做脏数据丢弃，尤其是Geo-point和Nested拥有各自...
匹配条件字段说明
匹配条件支持的匹配字段 匹配字段 支持的版本 适用的逻辑符 字段描述 URL 高级版、企业版、旗舰版、独享版 等于、不等于、等于多值之一、不等于任一值 包含、不包含、包含多值之一、不包含任一值 长度等于、长度大于、长度小于 前缀匹配、...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
创建文件数据源
数据字段 文件上传至数据库后，会以数据库表的形式存储，数据库字段名称 和 字段类型 为生成数据库表的字段名和类型，而 文件字段名 为上传文件的表头名，会变成数据库表的字段备注。您可以在文件上传时，修改 文件字段名、数据库字段名称 ...
元数据
元数据用于产品内的展示、检索使用，同时也是敏感数据规则自动化识别的基础信息，也是库、表、字段、数据行、可编程对象等细粒度的权限管控的基础信息。数据管理DMS会根据数据库实例的管控模式提供不同的采集范围与采集方式。背景信息 ...
03配置逻辑表关联字段标准
通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量，本文介绍如何配置逻辑表字段，关联标准字段。前提条件 已新建工作组“信息中心(xxzx)”，具体操作，请参见 新建工作组。已创建数据元...
管理数据表
本文为您介绍如何快速查找数据表，并查看数据表中的数据字段和数据类型等信息。查询数据表 当数据源中的数据表过多，无法快速定位到自己所需的数据表时，您可以按照以下步骤操作。登录 Quick BI控制台。按照下图指引，进入数据源管理页面。...
数据集成侧同步任务能力说明
说明 支持的变量解释：DATASOURCE_NAME_SRC：源端数据源名称 DB_NAME_SRC：源端数据库名称 TABLE_NAME_SRC：源表名称 DATASOURCE_NAME_DEST：目标端数据源名称 DB_NAME_DEST：目标端数据库名称 TABLE_NAME_DEST：目标表名称 DB_NAME_SRC_...
Quick BI报错“column xxx is ambiguous”
产品名称 Quick BI 产品模块 数据集、仪表板 问题描述 数据集预览报错，报错内容是“column xxx is ambiguous”问题原因 添加计算字段时，字段名是手动填写的，数据集又有表关联的操作，关联的表里的某个字段与原表字段名重复，无法识别...
替换数据集
选择完成后，需进行两个数据集中的 字段匹配 选择。说明 若出现以下情况将提示 错误icon：存在没有匹配上的字段、字段 类型 不一致。组件级数据替换 使用场景 您从其他仪表板复制组件、卡片引用时，所有字段和字段相关的配置都需要重新配置...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
手动新建逻辑表
引用现有表字段：单击 更多>引用现有表字段，可以将工作组已注册云计算资源中的物理表字段引用过来，选择可用的字段并单击 确定，实现快速创建字段。引用标准库字段：单击 更多>引用标准库字段，可使用数据标准中已创建的标准库字段，包括...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
虚拟关联
组件截图 二、参数说明 参数名称 参数说明 关联方式 建模的数据输入分别位于己方和对方的数据库中，进行隐私求交以得到交集信息，得到交集的双方数据保持在各自的数据库中。目前关联方式支持Inner/Left/Right Join。参与方1-选择匹配字段 ...
编辑器代码提效
使用限制 各类型计算引擎所支持的代码提效功能不同，代码提效所支持的计算引擎和功能项详情见下表：计算引擎 表提示 表字段提示 函数提示 权限校验 数据源编码提示 离线计算引擎 支持 支持 支持 支持-实时计算引擎（Flink）支持 支持 支持 ...
创建与管理数据模型
数据模型是在数据库创建及编排的一系列的数据表，是驱动应用开发的基础，继而生成DDL语句，创建数据库表。本文为您介绍如何创建、编辑及删除数据模型。前提条件 当前账号拥有项目权限。已完成限界上下文的创建。具体操作，请参见 创建与...
UpdateTableMeta-更新数据表
reso-2s416t*TableName string 是 数据库中的表名。table_mysql Module string 是 数据表模块。ABTest：实验数据表。ExperimentTool：实验工具表。DataDiagnosis：数据诊断 ABTest InstanceId string 是 实例 ID，可通过接口 ListInstances...
创建单物理表服务单元
在编辑单物理表服务单元时，如果系统判断到源表字段已删除，则支持删除该服务单元字段，提交配置后，在引用该服务单元新建API时，不会有该字段，避免调用API时因源表字段不存在而失败。服务单元字段描述 填写对服务单元字段简单的描述。...
错误检查
dataSourceSort='dataSourceSort',/判断数据库数据源 排序字段配置不对 checkDatasourceSort='checkDatasourceSort',/判断数据库数据源 范围字段配置不对 checkDatasourceRange='checkDatasourceRange',/判断数据库数据源 过滤字段配置不对...
全增量实时同步至Hologres
如上图所示，使用 源端数据库名 将源端数据库名作为目标schema名称，并且将所有满足 order_db.*正则表达式的源库写入目标Hologres名为 order_db 的schema中。自定义目标表名映射规则 在 目标表名映射自定义 列，单击 编辑 按钮。可以使用...
- 产品推荐
- 这些文档可能帮助您