产品整体介绍

数据库是数据库对象的物理集合,而模式是数据库内部用于组织管理数据库对象的逻辑集合,模式之下则是各种应用程序会接触到的对象,比如表、索引、数据类型、函数、操作符等。使用模式把数据库对象组织成逻辑组,让它们便于管理,允许多个...

模型概述

您可以在画布中添加模型组件内容,按照 模型查看器 组件配置的使用方法,来自定义修改,包括可配置模型的位置移动、大小缩放、样式配置、数据配置和蓝图配置等,详情请参见 组件指南 和 资产管理。模型组件可在更改关联设计资产功能的配置...

概述

阿里云DataWorks联合建模工具DDM(Datablau Data Modeler)为您提供一体化的数据建模解决方案(DATABLAU),将数据模型设计管控、引标落标等能力融入DataWorks规范化开发流程,助力用户实现数据资产价值化输出,在数据全生命周期上夯实数据...

常见问题

数据迁移和数据同步的区别如下表所示:对比项 数据迁移 数据同步 适用场景 主要用于上云迁移,例如将本地数据库、ECS上的自建数据库或第三方云数据库迁移至阿里云数据库。主要用于两个数据源之间的数据实时同步,适用于异地多活、数据灾备...

DataWorks数据服务对接DataV最佳实践

前提条件 要想实现DataWorks数据服务与DataV的对接,您需要提前准备好数据源,并开通 什么是DataV数据可视化。新建数据数据服务支持丰富的数据源类型,如下所示:关系型数据库:RDS、DRDS、MySQL、PostgreSQL、Oracle和SQL Server 分析...

什么是数据传输服务DTS

数据传输服务DTS(Data Transmission Service)是阿里云提供的实时数据流服务,支持关系型数据库(RDBMS)、非关系型的数据库(NoSQL)、数据多维分析(OLAP)等数据源间的数据交互,集数据同步、迁移、订阅、集成、加工于一体,助您构建...

云产品集成

什么是数据管理DMS 支持的数据库类型与功能 云数据库录入 DataV 数据可视化 DataV 数据可视化是使用可视化应用的方式来分析并展示庞杂数据的阿里云产品。您可以使用 DataV 添加 OceanBase for MySQL 数据源,通过图形化的界面处理 ...

透明数据加密概述

什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和解密。通过在数据库层执行静态数据加密,阻止可能的攻击者绕过数据库直接从存储中读取敏感信息。经过数据库身份验证的应用和用户可以继续透明地访问应用数据(不需要更改应用...

创建MongoDB数据

更多阿里云MongoDB信息,请参见 云数据库MongoDB-什么是数据库MongoDB版。使用限制 Dataphin仅支持超级管理员、数据源管理员、板块架构师、项目管理员角色创建数据源。超级管理员、数据源管理员角色添加与配置请参见 添加Dataphin成员。...

创建数仓分层

数仓分层是结合对业务场景、实际数据、使用系统的综合分析,对数据模型进行的整体架构设计及层级划分。用于将不同用途的数据,归类划分至不同的分层,便于您更好地组织、管理、维护数据。本文为您介绍如何创建并管理数仓分层。背景信息 ...

核心概念

另外,根据数据板块内数据的加工的程度,会将数据划分为三层,每一层一般对应独立的项目:ODM(Operational Data Model)操作数据模型层,也叫贴源层。用于存储从业务应用系统镜像复制(即不做任何过滤或者加工)的数据。CDM(Common Data ...

概述

发布数据模型:仅 空间管理员、运维 角色支持发布已创建的数据模型。如果您需要执行该操作,则可授权目标用户拥有对应的角色权限。授权详情请参见 空间级模块权限管控。概述 DataWorks数据建模支持数仓规划设计、制定并沉淀企业数据标准、...

数据建模:智能数据建模

数仓规划:数仓规划支持数仓分层、数据域、数据集市等的规划,支持设置模型设计空间,不同部门可共享一套数据标准和数据模型。数据标准:数据标准字段标准、标准代码、度量单位、命名词典的定义,支持标准代码自动生成质量规则,落标检查...

数仓分层

数据公共层CDM(Common Data Model,又称通用数据模型层),包括DIM维度表、DWD和DWS,由ODS层数据加工而成。主要完成数据加工与整合,建立一致性的维度,构建可复用的面向分析和统计的明细事实表,以及汇总公共粒度的指标。公共维度层...

系统管理

背景信息 建表策略管理:是否允许用户在没有数据模型的情况下,可在数据开发(DataStudio)直接创建MaxCompute物理表。策略启用后,凡是未通过智能数据建模发布,直接在数据开发(DataStudio)创建或修改的MaxCompute物理表,在执行提交、...

数仓分层

数据公共层CDM(Common Data Model,又称通用数据模型层),包括DIM维度表、DWD和DWS,由ODS层数据加工而成。主要完成数据加工与整合,建立一致性的维度,构建可复用的面向分析和统计的明细事实表,以及汇总公共粒度的指标。公共维度层...

导入

DataWorks智能数据建模的导入工具,为您提供了数据模型、数据标准等多种类型的对象模板,您可基于不同模板批量创建相应对象。该功能无需多次重复执行创建操作,即可快速生成多个对象,节省大量时间成本。本文为您介绍如何通过批量导入功能...

数据源中心

HIVE/IMPALA数据源 参数 是否必选参数 说明 数据源 数据源类型。数据源名称 是 输入数据源的名称。描述 否 输入数据源的描述。IP主机名 是 输入连接HIVE/IMPALA的IP地址。端口 是 HIVE/IMPALA 数据源类型对应的端口为10000。用户名 是 ...

必读:简单模式和标准模式的区别

场景示例:标准模式对使用流程的影响 如图,标准模式“生产、开发隔离”的模式将影响数据模型设计、数据处理逻辑、代码发布等流程。附录:不同工作空间模式下,DataWorks模块对应操作的数据源 您可以在 数据开发>数据源 界面下查看数据开发...

管理数据

单击 新建数据集,配置如下信息:配置项 是否必填 说明 名称 数据集名称,且在同一个用户下唯一。描述 否 用于描述数据集的属性。数据库 是 执行数据查询的目标数据库。您需要有该数据库的查询权限。变量 否 变量用于在仪表盘展示时,...

Schema约束

但是,时序数据模型本质上与关系型数据模型还是有所区别的。无论是在APM领域,还是IoT领域,或者是更偏传统的工业领域,时序数据所表现出的数据模型更像是一个半结构化数据——有其遵循结构化定义的一面、也有可灵活扩展的一面,而不是完全...

进入组件分析模式

DataV组件分析模式提供与原有组件的数据和样式配置不同的创作模式,采用以数据为核心、自动化样式配置、探索式构建视图的流程设计。通过优化数据视图绑定操作,方便您使用基于数据生成的模型创作可视化应用。本文介绍三种使组件进入BI分析...

车联网数据存储处理方案

方案总览 Lindorm是一款适用于任何规模、多种模型的云原生数据库服务,支持海量数据的低成本存储处理和弹性按需付费,提供宽表、时序、搜索、文件等多种数据模型,兼容HBase、Cassandra、Phoenix、OpenTSDB、Solr、SQL等多种开源标准接口,...

创建单物理表服务单元

物理数据表 依次选择数据源类型、数据源(基于您选择的模式,展示可以选择到的数据源类型)和物理数据表。您也可以单击 新增数据源 引入新的业务数据源,以便基于新的业务数据源创建服务单元。如何新增数据源,请参见 创建数据源。服务单元...

创建 MySQL 租户

MySQL 租户:在 OceanBase 数据库的 MySQL 模式中,数据库(Database)是数据库对象的集合。连接到数据库后,MySQL 租户可以创建自己的数据库,存储并管理自己的数据。详情参见 创建 MySQL 数据库。Oracle 租户:OceanBase 数据库的 Oracle...

产品简介

基于DLA无服务器化(Serverless)数据湖分析服务与内置的Spark计算引擎,DLA Ganos打通了阿里云各个存储系统,如PolarDB、Lindorm(HBase)、OSS等,通过统一的时空数据模型与计算接口,实现对多源异构数据的一体化管理与计算,并支持进行...

数据膨胀诊断

AnalyticDB PostgreSQL版 提供的智能诊断数据膨胀功能,可以定期自动诊断数据库内的所有表,并生成诊断信息表。您可以通过诊断信息表,查看表的膨胀情况并获得相应的处理建议(如执行VACUUM或VACUUM FULL操作)。注意事项 智能诊断数据膨胀...

创建 MySQL 租户

MySQL 租户:在 OceanBase 数据库的 MySQL 模式中,数据库(Database)是数据库对象的集合。连接到数据库后,MySQL 租户可以创建自己的数据库,存储并管理自己的数据。Oracle 租户:OceanBase 数据库的 Oracle 模式使用 Schema 来表示一个...

通过RAM角色授权模式配置数据

背景信息 数据源是数据同步任务的基础,同时关系着企业云上数据的安全性。DataWorks支持您使用更高安全系数的 RAM角色授权模式 配置并访问OSS、AnalyticDB for MySQL 2.0、LogHub、Tablestore和Hologres等部分数据源,以提升云上数据的安全...

通过脚本模式配置离线同步任务

说明 流量度量值是数据集成本身的度量值,不代表实际网卡流量。通常,网卡流量是通道流量膨胀的1至2倍,实际流量膨胀取决于具体的数据存储系统传输序列化情况。errorLimit(错误记录数控制)用于定义脏数据阈值,及对任务的影响。重要 当脏...

数据集成概述

基本概念 并发数 并发数是数据同步任务中,可以从源并行读取或并行写入数据存储端的最大线程数。限速 限速是数据集成同步任务可以达到的传输速度限制。脏数据 脏数据是对于业务没有意义,格式非法或者同步过程中出现异常的数据。单条数据...

通过向导模式配置离线同步任务

说明 流量度量值是数据集成本身的度量值,不代表实际网卡流量。通常,网卡流量是通道流量膨胀的1至2倍,实际流量膨胀取决于具体的数据存储系统传输序列化情况。错误记录数控制(脏数据控制)用于定义脏数据阈值,及对任务的影响。重要 当脏...

步骤二:规划数仓

数仓规划是基于Dataphin建设数据中台的第一步,同时也是数据体系的顶层设计中至关重要的一步。在开始数据开发前,需要完成数据仓库的规划,包括定义数据板块、项目、数据源、计算源和统计周期。本文将指导您完成本教程的规划数仓。背景信息...

调试流批一体任务

实时模式调试:采样对应的实时物理表数据,完成数据采样后将在FLINK Stream模式下进行本地调试。具体操作,请参见 实时模式调试。离线模式调试:采样对应的离线物理表数据,完成数据采样后将在FLINK Batch模式下进行本地调试。具体操作,请...

数据导入

Excel格式:Excel文件中可以有表头(属性),也可以直接是数据。目标表 选择导入数据的目标表。说明 当文件类型选择CSV或Excel格式时,会出现该参数项。数据位置 选择数据的位置:第1行为属性:表格首行是字段名。第1行为数据:表格首行...

OSS数据离线同步至MaxCompute

OSS数据源支持 RAM角色授权模式 与 Access Key认证模式 两种方式:Access key模式 Endpoint:您在 OSS产品控制台 OSS Bucket信息页面概览处获取到的访问端口,请参见 获取OSS Bucket信息。AccessKey ID:访问密钥中的AccessKey ID,您可以...

OSS数据离线同步至MaxCompute

OSS数据源支持 RAM角色授权模式 与 Access Key认证模式 两种方式:Access key模式 Endpoint:您在 OSS产品控制台 OSS Bucket信息页面概览处获取到的访问端口,请参见 获取OSS Bucket信息。AccessKey ID:访问密钥中的AccessKey ID,您可以...

权限管控与隔离

租户隔离 Dataphin支持租户的概念,不同租户之间的数据、任务、成员、权限是完全隔离的,只能通过跨租户发布进行数据和任务的流通。常见的情况有以下两种:两套独立部署的,物理隔离的Dataphin。如两家完全不同的企业之间的Dataphin,或者...

概述

创建数据迁移项目时,您可以指定的最大迁移范围是数据库级别,最小迁移范围是表级别。详情请参见 数据迁移 模块的内容。说明 目前数据迁移项目仅支持后付费模式,即按量付费计费模式。当前为限时免费阶段,具体收费时间另行通知。详情请...

导入数据

Excel格式:Excel文件中可以有表头(属性),也可以直接是数据。目标表 选择导入数据的目标表。数据位置 选择数据的位置:第1行为属性:表格首行是字段名。第1行为数据:表格首行是数据。写入方式 选择文件的写入方式:INSERT:插入数据时...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 数据传输服务 云数据库 RDS 云数据库 Redis 版 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用