Dataphin管道任务将逻辑表数据集成到业务数据库中时，...
概述 本文主要介绍Dataphin管道任务将逻辑表数据集成到业务数据库中时，调度配置中如何解析逻辑表任务为上游依赖。详细信息 由于Dataphin3.3版本开始，管道任务中没有自动解析的按钮，很多用户将逻辑表数据通过管道任务同步到其他业务数据...
功能特性
逻辑库 逻辑表 数据开发与分析 功能集 功能 功能描述 参考文档 SQL窗口 SQL窗口 可以非常便捷地执行各类SQL语句，同时支持以可视化的方式对目标数据库进行增、删、改、查等操作，适用于数据查询、数据开发等场景。SQL窗口介绍 SQL Console...
Dataphin 管道任务如何同步逻辑表数据
概述 本文描述了Dataphin 管道任务如何同步逻辑表数据。详细信息 管道任务的输入组件中，有LogicalTable输入组件可以同步逻辑表数据。逻辑表类型包括事实逻辑表、维度逻辑表、汇总逻辑表和标签逻辑表。相关文档 ...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
配置逻辑表数据延迟
维度与事实逻辑表数据延迟用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。本文为您介绍如何配置维度与事实逻辑表数据延迟。使用限制 事实逻辑表数据时效须为天时效（离线T+1）且该逻辑表设置了 事件时间 字段，才可配置是否开启数据...
ACL权限体系
以下列出AnalyticDB for MySQL 2.0的权限对象和各对象权限：Database（库），即 db_name.*或*（默认数据库），指定数据库或数据库上所有表/表组。TableGroup（表组），即 db_name.table_group_name 或 table_group_name，特定表组。Table...
创建数据库
参数 说明 限制并发量 指对应数据库并发请求执行的上限量，默认不限制，您也可以使用高权限账号登录数据库后，使用 ALTER DATABASE<数据库名>CONNECTION LIMIT<并发量>;命令修改。表空间 指数据库所属的表空间，默认为 pg_default，表空间...
查询数据代码说明
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
查询数据代码说明
查询数据的代码说明 查询逻辑表数据。SELECT*FROM 板块英文名.逻辑表名 WHERE ds='${bizdate}';其中：板块英文名：需要查询逻辑表所在数据板块的 板块英文名。您可以在数据板块页面，查看数据板块公用英文名。说明 若为开发环境查询数据，...
创建账号和数据库
如果您使用 一键上云 等迁移方式将本地自建数据库迁移上云时，表空间将与本地自建数据库表空间名称相同，支持将数据库和表的表空间修改为 pg_defult。常见问题 创建的账号在只读实例上可以用吗？答：主实例创建的账号会同步到只读实例，...
配置逻辑表基本信息
您可以在逻辑表编辑器属性对话框中查看逻辑表的基本信息，包括逻辑表的表类型、业务对象、数据板块，主题域、数据时效等基本信息，同时可配置对应责任人。本文为您介绍逻辑表属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，...
配置逻辑表基本信息
您可以在逻辑表编辑器属性对话框中查看逻辑表的基本信息，包括逻辑表的表类型、业务对象、数据板块，主题域、数据时效等基本信息，同时可配置对应责任人。本文为您介绍逻辑表属性的基本信息参数配置。操作步骤 请参见 离线任务属性入口，...
查看及管理逻辑表相关对象
逻辑表类型：包括普通维度逻辑表、层级维度逻辑表、事件事实逻辑表、快照事实逻辑表、流程事实逻辑表、汇总逻辑表。开发状态：包括草稿、提交中、已提交、开发中。若当前未展示所需的相关逻辑表，您可尝试单击 刷新当前关联逻辑表列表。② ...
查看及管理逻辑表相关对象
逻辑表类型：包括普通维度逻辑表、层级维度逻辑表、事件事实逻辑表、快照事实逻辑表、流程事实逻辑表、汇总逻辑表。开发状态：包括草稿、提交中、已提交、开发中。若当前未展示所需的相关逻辑表，您可尝试单击 刷新当前关联逻辑表列表。② ...
操作流程
物理化逻辑表 通过物理化的方式，将 企业数据智能平台 中创建的逻辑表存储到对应的云计算资源中，成为云计算资源或者数据库中实际存在的表，方便实施后面的管理。具体操作，请参见 物理化逻辑表。设置逻辑表质量规则 通过可视化方式设置...
基本概念
数据库 database 表示数据访问代理的逻辑数据库。以这个作为访问的入口，通过分库分表、读写分离等规则可以请求到后端真实的物理数据库。数据表 data table 表示数据访问代理的逻辑表，应用访问数据访问代理时 SQL 中的表即数据表。一个...
操作流程
物理化逻辑表 通过物理化的方式，将 数据资源平台 中创建的逻辑表存储到对应的云计算资源中，成为云计算资源或者数据库中实际存在的表，方便实施后面的管理。具体操作，请参见 物理化逻辑表。设置逻辑表质量规则 通过可视化方式设置质量...
逻辑表
配置完逻辑库后，系统会自动解析逻辑库中符合条件的物理表，生成逻辑表，您也可以手动更新逻辑表。本文介绍生成逻辑表的规则和手动更新逻辑表的方法。前提条件 已配置逻辑库。更多信息，请参见 逻辑库。逻辑库中有多张表结构相同且表名前缀...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
配置LogicalTable输入组件
LogicalTable输入组件用于读取Dataphin中逻辑表（事实逻辑表、维度逻辑表、汇总逻辑表）中的数据。同步Dataphin中逻辑表的数据至数据源的场景中，您需要先配置逻辑表信息。本文为您介绍如何配置LogicalTable输入组件。前提条件 在开始执行...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
逻辑库
为解决分库分表的场景下，查询、维护数据难的问题，DMS推出逻辑库、逻辑表的解决方案。您可以将多个（或单个）物理库配置成一个逻辑库、逻辑表，轻松查询与管理复杂、庞大的分库与分表。背景信息 分库分表场景下，业务数据按照路由算法分散...
通过Excel导入逻辑表
单击 下载模板，下载模板文件，并根据不同模板填写逻辑表数据信息或者质量规则。说明 如果本地存在从其他工作组中导出的逻辑表文件时，则不需要下载模板，直接导入已导出的文件，可实现工作组间的数据模型迁移。导入准备好的文件。单击 ...
数据库存储
使用示例 生成数据表 创建 OrmLiteSqliteOpenHelper 查询数据 插入数据 删除数据 生成数据表/数据库表名，默认为类名@DatabaseTable public class User {/主键@DatabaseField(generatedId=true)public int id;name 字段唯一@DatabaseField...
通过Excel导入逻辑表
单击 下载模版，下载模版文件，并根据不同模版填写逻辑表数据信息或者质量规则。说明 如果本地存在从其他工作组中导出的逻辑表文件时，则不需要下载模版，直接导入已导出的文件，可实现工作组间的数据模型迁移。导入准备好的文件。单击 ...
手动新建逻辑表
通过手动新建逻辑表，建立您期望的数据表样式和字段，并支持将逻辑表物理化至云计算资源中，为后续...说明 删除逻辑表不会同时删除数据库中已生成的物理表。后续步骤 创建完逻辑表以后，需要将逻辑表物理化，更多信息，请参见 物理化逻辑表。
导出逻辑表
通过导出逻辑表功能，一次批量导出多张数据模型，搭配导入功能，可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...
通过云计算资源导入逻辑表
您可以将已存在数据库中的数据表，通过云计算资源扫描方式，导入 企业数据智能平台 系统，实现逆向创建逻辑表。本文介绍如何通过云计算资源扫描方式创建逻辑表。前提条件 已添加工作组，具体操作，请参见 新建工作组。已新建目录，具体操作...
导出逻辑表
通过导出逻辑表功能，一次批量导出多张数据模型，搭配导入功能，可以快速实现工作组间的数据模型迁移。本文介绍如何导出逻辑表。前提条件 已新建逻辑表，具体操作，请参见 通过Excel导入逻辑表、通过云计算资源导入逻辑表 或 手动新建逻辑...
步骤八：验证数据
编写以下命令后，单击页面上方的 运行，验证 产品维度逻辑表 数据。SELECT*FROM LD_dataphin_tutorial.dim_products WHERE ds IS NOT NULL;编写以下命令后，单击页面上方的 运行，验证 购买下单事实逻辑表 数据。SELECT*FROM LD_dataphin_...
功能简介
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。表关系配置：支持建立多个表之间的关联关系，并提供关联关系编辑功能。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建...
Dataphin补数据后，查询表数据显示“Result row size=...
此时查询汇总逻辑表数据，数据条数正常，日志如下：select*from Ld_xxx.dws_brand where ds='20210707'-Result length=159 bytes,Result row size=3 Job success 适用于 Dataphin 说明：本文适用于公共云v2.9.4-3版本运维中心模块。
功能简介
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。表关系配置：支持建立多个表之间的关联关系，并提供关联关系编辑功能。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建...
通过云计算资源导入逻辑表
您可以将已存在数据库中的数据表，通过云计算资源扫描方式，导入 数据资源平台 系统，实现逆向创建逻辑表。本文介绍如何通过云计算资源扫描方式创建逻辑表。前提条件 已添加工作组，具体操作，请参见 新建工作组。已新建目录，具体操作，请...
RevokeUserPermission-回收用户库表权限
51*DsType string 是 权限类型，取值如下：INSTANCE：实例权限 DATABASE：物理库权限 LOGIC_DATABASE：逻辑库权限 TABLE：物理表权限 LOGIC_TABLE：逻辑表权限 DATABASE InstanceId long 否 实例 ID，回收实例权限时需要指定。可通过调用...
数据建模
物理化：支持将已存在的逻辑表物理化到数据库，并对物理化执行结果信息进行展示。质量规则配置：支持可视化与自定义SQL方式制定表级与字段级质量规则，并提供手工创建逻辑表字段时通过关联数据元自动生成质量规则的功能。一致性：支持当前...
维度逻辑表概述
维度即进行统计的对象。通常，维度是实际客观存在的实体。Dataphin遵循Ralph Kimball的维度建模理论，创建...新建虚拟维度逻辑表 虚拟维度逻辑表用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象。例如，访客、URL。
维度逻辑表概述
维度即进行统计的对象。通常，维度是实际客观存在的实体。Dataphin遵循Ralph Kimball的维度建模理论，创建...新建虚拟维度逻辑表 虚拟维度逻辑表用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象。例如，访客、URL。
录入与管理逻辑表
数据同步服务提供了元数据管理的录入逻辑表功能，可以将多张 schema 一致的物理表绑定成一张逻辑表。在新建数据同步任务时，选择此逻辑表为数据源端，即可将多张物理表中的数据同步至目的端。在 元数据管理>逻辑表列表 页面，您可以录入并...
逻辑表调度配置概述
配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则，包括调度类型、调度周期、条件调度。调度依赖 调度依赖用于配置逻辑表任务上游依赖节点。...
- 产品推荐
- 这些文档可能帮助您