通过SQL模式创建API（Dataphin表）
命令格式 select(<返回参数1>+<返回参数2>)as<别名>，(<返回参数2>+<返回参数3>)as<别名>from<逻辑表名>where<字段c>=${请求参数名1} and<字段b>>=${请求参数名2} or<字段c>${请求参数名3} 使用示例-在数据表A中查询当字段c=id_card，或...
配置FeatureStore项目
字段配置 说明 特征字段 Label表中如果存在某些特征的话，可勾选对应字段为特征字段。FG保留字段 当前阶段可不做配置。事件时间 勾选Label表中记录行为产生的时间戳字段。Label字段 勾选Label表中的Label字段。分区字段 勾选Label表中的...
申请、续期和交还表权限
查表数据：拥有表级查表数据权限可以查询表的任意字段，包括后续新增字段。同时可单独申请字段的查表数据权限，两者按照最长有效期生效。改表数据：拥有表级的改表数据权限。删除表：删除整表的权限（drop）。改表结构：修改表结构的权限，...
新建镜像表
镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 单击 确定。步骤三：预览镜像关系 在镜像表开发页面，页面右侧为您展示 镜像关系预览 面板。在 镜像关系预览 面板，查看实时表、离...
申请、续期和交还表权限
查表数据：拥有表级查表数据权限可以查询表的任意字段，包括后续新增字段。同时可单独申请字段的查表数据权限，两者按照最长有效期生效。改表数据：拥有表级的改表数据权限。删除表：删除整表的权限（drop）。改表结构：修改表结构的权限，...
新建镜像表
镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 镜像表字段,实时表字段,离线表字段 单击 确定。步骤三：预览镜像关系 在镜像表开发页面，页面右侧为您展示 镜像关系预览 面板。在 镜像关系预览 面板，查看实时表、离...
示例：模型设计
说明 设置默认值不会影响代码生成和数据库DDL语句。整数数值类：Integer（整数）、Long（长整型）。可选择该字段是否为 主键、是否 必填、是否 唯一，并设置 默认值。小数数值类：Double（小数）、Decimal（高精小数）。该类型不支持作为...
导入数据至维表
创建完成维表后，您可以在维表中直接写入数据，也可以导入电子表格、本地CSV文件和Excel文件的数据至维表，为后续数据分析做准备。前提条件 已创建完成一个维表，详情请参见 创建维表。操作步骤 在 维表 页面，单击 全部维表 下相应的 文件...
数据治理
数据质量监控 应用场景 从完整性、准确性、有效性、一致性、唯一性和及时性等多个维度对产出表数据进行校验，自动拦截问题任务，有效阻断脏数据向下游蔓延，避免非正常数据影响使用和业务决策。监控逻辑 实例（ds_mbr_use_info）产出一张表...
创建逻辑模型：应用表
添加表字段 您可以通过 快捷模式 或 代码模式 为表添加字段，其中 快捷模式 支持如下导入方式：从表/视图导入：从计算引擎已存在的物理表或视图导入字段，即在 查找已有表/视图 下拉列表搜索并选择已存在的物理表或视图进行字段导入。...
新建行为关系
说明 非E-MapReduce 5.x、亚信DP 5.3 Hadoop、AnalyticDB for PostgreSQL计算引擎，行为时间 属性的字段名称支持选择date、datetime、string、char、varchar、int、bigint、double、decimal等数据类型的字段。非timestamp字段类型，系统将...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
查看及管理逻辑表下游对象
逻辑表的下游对象，指引用当前逻辑表字段生成的原子指标和业务限定。本文为您介绍如何查看及管理逻辑表的下游对象。逻辑表下游对象入口 请参见 规范建模入口，进入 规范建模 页面。按照下图操作指引，选择您需查看及管理下游对象的逻辑表，...
新增离线数据同步任务
数据字段选项仅适用于关系型数据库例如：MySQL、Oracle、SQL Server、PostgreSQL等类型的数据源。适用的字段类型包括字符串类型字段，类如：Oracle字符串类型varchar,varchar2,char。MySQL字符串类型varchar,char。取数规则：只针对日期...
新增离线数据同步任务
数据字段选项仅适用于关系型数据库例如：MySQL、Oracle、SQL Server、PostgreSQL等类型的数据源。适用的字段类型包括字符串类型字段，类如：Oracle字符串类型varchar,varchar2,char。MySQL字符串类型varchar,char。取数规则：只针对日期...
Kafka增量数据同步至MaxCompute
本文以将Kafka增量数据同步至MaxCompute的一个实践为例，为您介绍Kafka的分钟、小时、天增量数据定时调度写入MaxCompute小时、天分区表的配置详情。注意事项 Kafka的版本需要大于等于0.10.2小于等于2.2.x，且Kafka启用了记录时间戳，并且...
Kafka增量数据同步至MaxCompute
本文以将Kafka增量数据同步至MaxCompute的一个实践为例，为您介绍Kafka的分钟、小时、天增量数据定时调度写入MaxCompute小时、天分区表的配置详情。注意事项 Kafka的版本需要大于等于0.10.2小于等于2.2.x，且Kafka启用了记录时间戳，并且...
数据类型映射
多元索引的字段值来源于数据表中同名字段的值，两者的数据类型必须相匹配，多元索引字段数据类型与数据表中字段数据类型的匹配关系请参见下表。注意 表中的类型必须一一对应，否则数据会被当做脏数据丢弃，尤其是Geo-point和Nested拥有各自...
子表查询
UNNEST(simple4.sub_simple4_table)WHERE field_int8>=2 子表字段过滤：SELECT field_int32,field_int32+1 as output FROM simple4,UNNEST(simple4.sub_simple4_table)WHERE field_int8>=2 AND sub_id注意 如果WHERE语句中带有子表字段的...
RDS全增量同步
LTS、云数据库HBase迁移集群、RDS实例的网络已连通（都在同一个VPC中可以跳过）。功能列表 RDS数据全增量一体同步到Lindorm宽表模型（兼容HBase访问）。RDS数据变换，请参见 配置说明。RDS多表同步。使用限制 RDS全量同步支持数据源MySQL。...
查看血缘关系
优势 详情 提升数据确认效率 通过溯源数据，可以全面了解数据的各个方面，包括作业涉及的产品、数据库和表情况，表字段的属性和关联关系，数据的来源、经过的处理步骤、传输路径以及最终的消费者。这样可以帮助您更好地理解数据的流向和...
Oracle同步至Tablestore
本文以Oracle同步至表格存储Tablestore场景为例，为您介绍如何通过数据集成将Oracle的某张表数据实时同步到Tablestore。使用限制 本实践仅支持使用 独享数据集成资源组。前提条件 已完成来源数据源、去向数据源的配置。本实践以Oracle作为...
StarRocks物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
元表和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
配置ClickHouse输入组件
同步ClickHouse数据源的数据至其他数据源的场景中，您需要先配置ClickHouse输入组件读取的数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置ClickHouse输入组件。前提条件 在开始执行操作前，请确认您已完成ClickHouse数据源...
逻辑视图和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
镜像表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
配置Oracle输入组件
同步Oracle数据源的数据至其他数据源的场景中，您需要先配置Oracle输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置Oracle输入组件。前提条件 在开始执行操作前，请确认您已完成以下操作：已创建Oracle数据...
逻辑视图和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
元表和字段资产详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
MaxCompute物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
设计阶段
数据探查的内容主要包括但不限于以下内容：源表数据主键字段重复数。源表字段空值/异常值的统计数。源表之间关联关系。源表字段的数据格式。源表增量规则。探查完成后，最终产出 数据探查报告。如果发现当前数据无法支撑需求的实现，则要将...
开启和使用冷数据分层存储
暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该功能目前处于免费公测阶段，如需试用该功能，可以 ...
RevokeColumnPermission
调用RevokeColumnPermission，撤销用户的表字段权限。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
开启和使用冷数据分层存储
暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该功能目前处于免费公测阶段，如需试用该功能，可以 ...
开启和使用冷数据分层存储
暂不支持的DDL：暂不支持在OSS表空间中创建数据库：CREATE DATABASE dbname TABLESPACE OSS;暂不支持将已有数据库一次性转入OSS表空间：ALTER DATABASE dbname SET TABLESPACE OSS;说明 该功能目前处于免费公测阶段，如需试用该功能，可以 ...
镜像表和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
MaxCompute/Hadoop物理视图和字段详情
② 图例区 表级血缘支持的数据表，包括 物理表、维度逻辑表、事实逻辑表、汇总逻辑表、标签逻辑表、物理视图、逻辑视图、元表、镜像表、数据源表。③ 血缘图展示区 为您展示完整的血缘链路图，可手动展开多级上游或下游，支持根据数据表...
配置AnalyticDB for PostgreSQL输入组件
同步AnalyticDB for PostgreSQL数据源的数据至其他数据源的场景中，您需要先配置AnalyticDB for PostgreSQL输入组件读取的源数据源信息，再配置数据同步的目标数据源。本文为您介绍如何配置AnalyticDB for PostgreSQL输入组件。前提条件 在...
创建元数据
在基于HBase、Elasticsearch或MongoDB数据源创建服务单元之前，需要先创建对应数据源中数据表的元数据，以实现通过元数据确定数据源中数据表的结构。后续您可以通过该元数据读取到对应数据源的数据。本文为您介绍如何创建HBase、...
- 产品推荐
- 这些文档可能帮助您