逻辑表调度配置概述

配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则,包括调度类型、调度周期、条件调度。调度依赖 调度依赖用于配置逻辑表任务上游依赖节点。...

逻辑表调度配置概述

配置项 描述 数据延迟 用于自动重跑逻辑表在 最大延迟天数 周期内的全部数据。配置调度属性 逻辑表调度属性用于定义逻辑表任务在调度过程中的调度规则,包括调度类型、调度周期、条件调度。调度依赖 调度依赖用于配置逻辑表任务上游依赖...

如何选择拆分键

数据表拆分的首要原则是尽可能找到数据所归属的业务逻辑实体,并确定部分(或核心的)SQL操作或者具备一定并发的SQL都是围绕这个实体进行,然后可使用该实体对应的字段作为拆分键。示例 业务逻辑实体通常与应用场景相关,下面的一些典型...

新建层级维度逻辑

步骤二:配置层级维度逻辑表计算逻辑 在 计算逻辑 页面,配置维度逻辑表的来源数据与主键间的映射关系。参数 描述 字段名称 默认为业务过程的名称,您也可以修改字段名称,命名规则如下:不能超过128个字符。支持任何字符。数据类型 根据...

新建层级维度逻辑

步骤二:配置层级维度逻辑表计算逻辑 在 计算逻辑 页面,配置维度逻辑表的来源数据与主键间的映射关系。参数 描述 字段名称 默认为业务过程的名称,您也可以修改字段名称,命名规则如下:不能超过128个字符。支持任何字符。数据类型 根据...

维度逻辑表概述

维度即进行统计的对象。通常,维度是实际客观存在的实体。Dataphin遵循Ralph Kimball的维度建模理论,创建...新建虚拟维度逻辑表 虚拟维度逻辑表用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象。例如,访客、URL。

维度逻辑表概述

维度即进行统计的对象。通常,维度是实际客观存在的实体。Dataphin遵循Ralph Kimball的维度建模理论,创建...新建虚拟维度逻辑表 虚拟维度逻辑表用于规范化没有具体业务实体承载、没有可固化数据范围逻辑定义的维度对象。例如,访客、URL。

迁移RDS SQL Server数据到本地SQL Server

RDS SQL Server支持通过物理备份文件将云上的数据迁移到本地数据库。说明 除了本文介绍的迁移方法外,您还可以使用 数据传输服务DTS(Data Transmission Service),将RDS SQL Server数据迁移至自建SQL Server。操作步骤 下载RDS SQL ...

Dataphin补数据后,查询表数据显示“Result row size=...

数据逻辑顺序为:首先需要有维度逻辑表、事实逻辑表的补数据,再进行汇总逻辑表补数据才能在验证数据时查到字段。如果在维度逻辑表、事实逻辑表未完成补数据前,对汇总逻辑表进行了补数据,则会报Result row size=0,即汇总逻辑表无数据...

通用数据开发

通常数据开发的总体流程包括数据产生、数据收集与存储、数据分析与处理、数据提取和数据展现与分享。说明 上图中,虚线框内的开发流程均可基于阿里云大数据平台完成。数据开发的流程如下所示:数据产生:业务系统每天会产生大量结构化的...

数据服务概述

功能介绍 数据服务支持基于业务数据源的物理表或Dataphin生成的逻辑表 创建服务项目分组 和 开发Dataphin数据源并加速数据查询,以满足不同场景的业务诉求。后续应用就可以 调用API 和 调用Dataphin数据源。同时数据服务支持 运维监控API,...

授权和回收数据板块权限

本文为您介绍如何授予和回收数据板块的权限。授权数据板块权限 在Dataphin首页...逻辑表 选择需要回收的逻辑表的权限。权限类型 默认回收 查询 权限,不支持修改。回收原因 填写回收数据板块权限的原因。单击 确定,完成数据板块权限的回收。

授权和回收数据板块权限

本文为您介绍如何授予和回收数据板块的权限。授权数据板块权限 在Dataphin首页...逻辑表 选择需要回收的逻辑表的权限。权限类型 默认回收 查询 权限,不支持修改。回收原因 填写回收数据板块权限的原因。单击 确定,完成数据板块权限的回收。

管理Dataphin数据源权限

如果您已购买了数据服务模块,即可将Dataphin加工生成的逻辑表或物理表配置为供应用调用的Dataphin数据源。如果您需要调用他人管理的Dataphin数据源,则需要申请Dataphin数据源权限。同时,您也可以交还已获取Dataphin数据源的权限。前提...

云产品集成

您可以使用 DMS 录入云数据库 OceanBase 的数据,通过 DMS 的全域数据资产管理、数据治理、数据库设计开发、数据集成、数据开发和数据消费等功能,帮助企业高效、安全地挖掘数据价值,助力企业数字化转型。什么是数据管理DMS 支持的数据库...

配置逻辑表调度属性

按照下图操作指引,选择您需配置调度属性的逻辑表,进入 调度配置 信息页面。下图以维度逻辑表为例。在 调度属性 区域,配置逻辑表任务调度参数。参数 描述 调度类型 支持正常调度、空跑调度及暂停调度3种调度类型。正常调度:按照调度周期...

配置逻辑表调度属性

按照下图操作指引,选择您需配置调度属性的逻辑表,进入 调度配置 信息页面。下图以维度逻辑表为例。在 调度属性 区域,配置逻辑表任务调度参数。参数 描述 调度类型 支持正常调度、空跑调度及暂停调度3种调度类型。正常调度:按照调度周期...

实时存储引擎

这种方法在数据规模较大的场景,存在明显的性能瓶颈,产生较高的Hash开销。为了避免Hash的开销,AnalyticDB MySQL版 采用了 Swizzling Pointer 的实现方案,以64 bit存储Page的唯一标识。当Page在内存中时:头部第一个bit标记为0;其余bit...

概述

通用组件无法满足业务需要时,您可以通过自定义页面组件满足特定的样式规范、交互动作、数据逻辑。例如,您可以自定义开发一套符合您产品调性的扁平化风格移动端组件,或者自定义一个包含复杂交互和联动逻辑的高级日历组件。关于如何基于...

概述

数据集是数据的结构化形态,一切逻辑、权限、服务等都是从数据集展开。仪表盘是数据分析和数据展示的画布,在仪表盘中可以做实时的数据分析,也可以将数据制作为报表进行展示或分享。大屏是针对屏幕的特殊数据展示画布,支持灵活自定义的...

逻辑备份恢复至自建数据库

本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性,自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...

逻辑备份恢复至自建数据库

本文介绍如何通过Mongorestore将云数据库MongoDB实例的逻辑备份文件恢复至自建MongoDB数据库中。前提条件 实例存储类型为 SSD本地盘。为保障兼容性,自建MongoDB数据库和云数据库MongoDB实例的数据库版本相同。背景信息 MongoDB提供了一组...

新建逻辑表命名规则

逻辑表命名规则旨在于让创建的逻辑表遵循统一的命名规范标准,可基于模型命名属性,对模型命名规则进行配置,形成条理清晰,方便检索并易于理解的数据模型,让数据模型应用更方便。本文介绍如何创建逻辑表命名规则。前提条件 已完成模型...

新建逻辑表命名规则

逻辑表命名规则旨在于让创建的逻辑表遵循统一的命名规范标准,可基于模型命名属性,对模型命名规则进行配置,形成条理清晰,方便检索并易于理解的数据模型,让数据模型应用更方便。本文介绍如何创建逻辑表命名规则。前提条件 已完成模型...

授权与回收表权限

板块架构师支持批量授权或批量回收所负责板块下的逻辑表和逻辑视图的表权限。当前表负责人支持批量授权自己是负责人的表权限。批量授权表权限 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 批量授权 对话框。在 ...

查询用户OSS或专属存储的归档数据

DMS的逻辑数仓支持联合查询不同OSS或相同OSS的数据归档,您需要进入逻辑数仓功能页面,并登录相关OSS实例,再通过联合查询语句LEFT JOIN、INNER JOIN、RIGHT JOIN,完成联合查询操作。Q:同一个工单内进行了多次归档,即周期归档,在进行...

授权与回收表权限

板块架构师支持批量授权或批量回收所负责板块下的逻辑表和逻辑视图的表权限。当前表负责人支持批量授权自己是负责人的表权限。批量授权表权限 在Dataphin首页,单击顶部菜单栏的 管理中心。按照下图操作指引,进入 批量授权 对话框。在 ...

【通知】2023年06月30日跨数据库查询DSQL升级通知

为提供更好的跨库查询服务,跨数据库查询DSQL将于2023年06月30日进行升级,升级后,原DSQL控制台界面将下线并统一使用DMS的逻辑数仓功能进行跨库查询,应用程序访问DSQL的功能也将迁移至DMS逻辑数仓的一键JDBC功能中。背景信息 DSQL主要...

数据库对象的逻辑结构

数据库对象的逻辑结构指数据库中的各种数据对象之间的关系和组织方式。AnalyticDB PostgreSQL 数据库由许多数据库对象组成,包括表(table)、索引(index)、序列(sequence)、视图(view)、以及数据库(database),数据库对象在逻辑上...

增强E-R

随着业务规模的增大和数据库外键性能的降低,越来越多的系统设计采用应用系统来保障业务之间的依赖关系,导致数据库的外键信息并不会真正的沉淀到数据库外键设计上,不易通过实际数据库的外键信息看到业务数据表中的逻辑关系,进而影响您...

必读:简单模式和标准模式的区别

绑定后不同工作空间模式下,DataWorks模块对应操作的数据源如下表所示:DataWorks模块 标准模式 简单模式 数据开发 操作开发环境数据源(实例,项目、数据库)操作生产环境数据源(实例,项目、数据库)运维中心 开发环境运维中心:操作...

常见问题

磁盘上的Data Part会不断的通过后台线程进行Merge操作,以使众多小的Data Part合并成一个大的Data Part。在将数据导入至MergeTree表的时候,初始时后台线程可能找不到任何可以进行Merge的Data Part,此时所有的资源都在处理导入的数据从...

恢复下载后的备份数据

service mysqld start 恢复逻辑备份的下载数据 下载后的备份数据说明 包含数据库的建表语句(DDL)和SQL数据。MySQL逻辑备份下载数据的目录结构与示例文件如下:建表语句示例 CREATE TABLE `rds_db`.`orders`(`order_id` bigint(20)COMMENT...

管理数据看板

进入恢复模式 重要 当您编写的过滤器有问题(例如死循环导致的看板卡顿)、数据源配置有问题(例如返回的数据量过导致的看板卡顿)或自定义组件有逻辑问题等其他原因导致数据看板无法编辑时,使用恢复模式进入,可以删除掉带来问题的内容...

质量规则模板类型

如果差异较,可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下,需要构建多条链路,以便数据出现异常时,能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题,提升实时...

质量规则模板类型

如果差异较,可能存在较大数据质量的问题需要进行确认和修复。实时多链路对比 高可用场景下,需要构建多条链路,以便数据出现异常时,能够及时切换。对于多链路之间的数据计算进度监控则可以发现一些数据滞留、统计偏差问题,提升实时...

使用pg_restore恢复逻辑备份文件数据

本文介绍如何使用pg_restore命令将逻辑备份文件(.dump文件)中的数据恢复到RDS PostgreSQL实例或本地PostgreSQL数据库中。说明 对于少量的数据,您可参考本文使用逻辑备份进行快速恢复,例如恢复某个表的数据。对于大量的数据,建议您使用...

申请、续期和交还表权限

数据板块:当表类型选择为 逻辑视图、建模逻辑表 和 标签逻辑表 时,建议选择逻辑表所在的数据板块。项目:当表类型选择为 物理表、元表、镜像表、物理视图 时,建议选择物理表所在的项目。说明 批量申请权限最多选择100张数据表。筛选项为...

申请、续期和交还表权限

数据板块:当表类型选择为 逻辑视图、建模逻辑表 和 标签逻辑表 时,建议选择逻辑表所在的数据板块。项目:当表类型选择为 物理表、元表、镜像表、物理视图 时,建议选择物理表所在的项目。说明 批量申请权限最多选择100张数据表。筛选项为...

OpenAPI列表

QueryHomoAtomicIndexById 获取同源原子指标数据信息,同源指来源于同一个逻辑表的原子指标,一个原子指标可配置三个不同时效的计算逻辑,因此可来源于三个不同时效的逻辑表。逻辑表 GetLogicalModelSubTree 获取逻辑表对象的导航树结构。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用