Dataphin层级维度和父子...数据处理单元是算一个还是多个
概述 本文主要介绍Dataphin层级维度和父子维度,在维度页面都会展示多个维度，数据处理单元是算一个还是多个处理单元。详细信息 维度不算数据处理单元，维度逻辑表算数据处理单元，提交的时候进行校验。Dataphin数据处理单元查看地方。在...
Dataphin资源统计中数据处理单元用量详情是怎么统计的
问题描述 Dataphin资源统计中数据处理单元用量详情是怎么统计的？解决方案 这里统计的是已提交的任务，包括开发环境上已提交还未发布到生产上的任务。如果已提交的任务下线后，是不会统计在内的。更多信息 查看资源使用情况 适用于 ...
Dataphin如何查看数据处理单元用量
概述 本文主要描述了Dataphin查看数据处理单元用量的方法。详细信息 适用于 Dataphin v.2.9.7
财务单元分配列表数据更新
从4月4日起，财务单元分配列表数据更新，可以满足所有的费用都可以分账。主要变化点：在未分配列表中，会多出一些待分配资源。即产生费用的资源都会显示出来，待分配。比较原版本已解决了如下问题：1、所有产品资源都可以分账 2、实例资源...
为什么已使用的Dataphin数据处理单元会超过已购买的...
内容摘要：短时间内多次执行批量发布操作，有较小概率会造成已使用的数据处理单元数超过已购买的可用上限 问题描述 为什么已使用的Dataphin数据处理单元会超过已购买的可用上限？原因说明 Dataphin中，仅已经发布到生产环境的任务或表会...
Dataphin配置了服务单元，数据预览报错“数据预览错误...
问题描述 Dataphin配置了服务单元，数据预览报错“数据预览错误：网关接口返回错误”。问题原因 数据源的jdbcUrl需要没有添加参数。解决方案 给这个有问题的服务单元使用的数据源的jdbcUrl加上参数后解决。编码格式按数据库的实际编码格式...
Dataphin新建服务单元时找不到已经创建的数据源
问题描述 本文主要描述了Dataphin的API服务开发，新建服务单元时找不到已经创建的数据源的解决方法。问题原因 数据源没有申请权限。解决方案 在资产模块点击权限管理，在数据源权限中点击申请数据源权限。选择需要申请权限的数据源，勾选...
Dataphin创建API创建服务单元时，选择不到项目用到的...
问题描述 Dataphin创建API创建服务单元时，选择不到项目用到的数据源类型怎么处理。问题原因 数据服务模块目前支持选择以下类型数据源：MySQL、Microsoft SQL Server、PostgreSQL、Oracle、AnalyticDB for MySQL 2.0、AnalyticDB for MySQL...
创建单物理表服务单元
单物理表服务单元用于对业务数据源的单个物理表进行元数据配置。后续您可以基于该单物理表服务单元开发访问该物理表数据的API。本文为您介绍如何创建单物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作，请参见 创建服务项目...
创建多物理表服务单元
后续您可以基于该多物理表服务单元开发可以同时访问多物理表数据的API，以实现联合数据查询。本文为您介绍如何创建多物理表服务单元。前提条件 已完成服务单元分组的创建。具体操作，请参见 创建服务项目分组。当数据源类型为Hbase 0.9.4/1...
查看资源用量大盘
资源用量大盘为您展示当前租户下已使用的数据处理单元总量和按任务类型分别统计的消耗趋势以及按项目粒度统计的消耗增量排行，帮助您了解数据处理单元的消耗情况以及时调整资源规格配置。本文为您介绍如何查看资源用量大盘。前提条件 需...
租户设置
通过创建多个租户，可以对不同租户分配不同的数据单元以及功能模块，并能够保证租户间数据隔离，满足不同租户的不同要求。本文为您介绍如何新建、编辑、删除以及恢复租户。权限说明 仅元仓租户的超级管理员与系统管理员支持新建及管理租户...
表
表是MaxCompute的数据存储单元。它在逻辑上是由行和列组成的二维结构，每行代表一条记录，每列表示相同数据类型的一个字段。MaxCompute的表类似于传统关系型数据库中的表，可以存储结构化数据，并且使用SQL进行查询和分析。MaxCompute中...
单元化介绍
单元（即单元化应用服务产品层的部署单元），是指一个能完成所有业务操作的自包含集合，在这个集合中包含了所有业务所需的所有服务，以及分配给这个单元的数据。单元化架构就是将单元作为部署的基本单位，在全站所有机房中部署多个单元，每...
术语表
Project（项目）项目是MaxCompute的基本组织单元，类似于传统数据库的Database或Schema的概念，是进行多用户隔离和访问控制的主要边界。更多项目信息，请参见 项目。Q Quota（配额）配额是MaxCompute的计算资源池，提供作业运行所需计算...
功能特性
功能集 功能 功能描述 参考文档 管理 项目管理 项目（Project）是MaxCompute的基本组织单元，是进行多用户隔离和访问控制的主要边界。项目管理 配额（Quota）管理 提供计算资源消耗查看、调整、增删改查等涉及日常资源管理运维相关功能。...
CreateGadInstanceMember-创建Gad实例成员
Test12345 DBList string 是 中心节点中数据库信息的 JSON 数组，数组中所有数据库信息将同步至当前单元节点。参数说明：name：数据库名称。all：是否同步当前库或表中的所有数据。取值：true|false Table：表名称。若 all 参数为 false，...
CreateGadInstanceMember-创建Gad实例成员
Test12345 DBList string 是 中心节点中数据库信息的 JSON 数组，数组中所有数据库信息将同步至当前单元节点。参数说明：name：数据库名称。all：是否同步当前库或表中的所有数据。取值：true|false Table：表名称。若 all 参数为 false，...
CreateGADInstance-创建GAD实例
rm-uf6wjk5*DBList string 是 中心节点中数据库信息的 JSON 数组，该数组中所有数据库信息将同步至当前单元节点（备节点）。参数说明：name：数据库名称。all：是否同步当前库或表中的所有数据。取值：true|false Table：表名称。若 all ...
CreateGADInstance-创建GAD实例
rm-uf6wjk5*DBList string 是 中心节点中数据库信息的 JSON 数组，该数组中所有数据库信息将同步至当前单元节点（备节点）。参数说明：name：数据库名称。all：是否同步当前库或表中的所有数据。取值：true|false Table：表名称。若 all ...
数据源中心
HIVE/IMPALA数据源 参数 是否必选参数 说明 数据源 是 数据源类型。数据源名称 是 输入数据源的名称。描述 否 输入数据源的描述。IP主机名 是 输入连接HIVE/IMPALA的IP地址。端口 是 HIVE/IMPALA 数据源类型对应的端口为10000。用户名 是 ...
管理数据目录
数据目录是数据湖构建（Data Lake Formation）的元数据最上层实体，可以包含若干个数据库。在EMR Serverless Spark中，您可以通过该功能来查看绑定的数据目录中的数据库和表，还可以添加已有的数据目录。该功能适用于需要实现元数据隔离的...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
创建数据库
字符集：字符集是数据库中字母、符号的集合，以及它们的编码规则。注意事项 支持在控制台创建管理数据库。如果您要迁移本地数据库到RDS，请在RDS实例中创建与本地数据库一致的迁移账号和数据库。创建数据库 访问 RDS实例列表，在上方选择...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
产品概述
什么是全密态数据库 全密态数据库是 达摩院数据库与存储实验室 与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何...
概述
设计理念 数据分析的核心概念设计分别是数据集、可视化组件（仪表盘和大屏）。数据集是数据的结构化形态，一切逻辑、权限、服务等都是从数据集展开。仪表盘是数据分析和数据展示的画布，在仪表盘中可以做实时的数据分析，也可以将数据制作...
管理数据库
字符集：字符集是数据库中字母、符号的集合，以及它们的编码规则。前提条件 已创建RDS MariaDB实例 注意事项 RDS MariaDB不支持修改数据库名。创建数据库 通过控制台 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏...
数据建模：智能数据建模
智能数据建模是阿里云DataWorks自主研发的智能数据建模产品，沉淀了阿里巴巴十多年来数仓建模方法论的最佳实践，包含数仓规划、数据标准、维度建模及数据指标四大模块，帮助企业在搭建数据中台、数据集市建设过程中提升建模及逆向建模的...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
数据质量教程概述
数据质量是数据分析结论有效性和准确性的基础。本文为您介绍数据质量保障教程的业务场景以及如何衡量数据质量的高低。前提条件 在开始本教程前，请您首先完成 搭建互联网在线运行分析平台 教程，详情请参见 业务场景与开发流程。业务场景 ...
管理数据库
字符集：字符集是数据库中字母、符号的集合，以及它们的编码规则。建库建表数量限制 账号类型 建库数量 建表数量 高权限账号 MySQL对数据库的数量没有限制。底层文件系统可能对目录数量有限制。万 普通权限账号万 前提条件 已创建RDS MySQL...
概述
全局一致性 PolarDB-X 是一款分布式数据库，数据存放在多个数据节点（DN）上，当分布式事务存在的情况下，恢复后的实例需要保证多个数据节点间的数据一致性。下图通过转账测试给出了全局一致性的示例：PolarDB-X 中存放了一张用户的账户...
数据集成概述
基本概念 并发数 并发数是数据同步任务中，可以从源并行读取或并行写入数据存储端的最大线程数。限速 限速是数据集成同步任务可以达到的传输速度限制。脏数据 脏数据是对于业务没有意义，格式非法或者同步过程中出现异常的数据。单条数据...
管理数据集
单击 新建数据集，配置如下信息：配置项 是否必填 说明 名称 是 数据集名称，且在同一个用户下唯一。描述 否 用于描述数据集的属性。数据库 是 执行数据查询的目标数据库。您需要有该数据库的查询权限。变量 否 变量用于在仪表盘展示时，...
透明数据加密概述
RDS PostgreSQL支持透明数据加密（Transparent Data Encryption，简称TDE），对数据文件进行实时加密和解密，保护用户数据隐私，本文介绍透明数据加密的基本概念和加密原理。什么是透明数据加密 透明数据加密指对数据文件执行实时I/O加密和...
数据迁移与同步FAQ
什么是数据迁移、数据同步？DTS的数据迁移与数据同步工作原理是什么？DTS的数据迁移与数据同步有什么区别？使用DTS遇到预检查报错，如何解决？什么是数据迁移、数据同步？数据迁移：将Redis数据库中的数据（即键值对）迁移至另一个Redis...
概述
随着业务的快速发展，企业数据呈几何倍增长，数据量庞大、复杂、各类数据间标准不一致，往往会出现数据难以管理的现象。DataWorks智能数据建模服务，将无序、杂乱、繁琐、庞大且难以管理的数据，进行结构化有序的管理。使企业中的数据产生...
冷热分层
Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作。通过结合Delta Lake和上下游组件，您可以搭建出一个便捷、易用、安全的数据湖架构。在数据湖架构设计中，通常会...
数据标准
数据是由特定的环境产生的，这些环境因素包括生产者、时间、系统等，从而造成了同一个语义的数据，有多种不同的定义方法，给后期进行数据汇集和整合带来障碍。因此，数据处理的前奏就是数据标准化，数据标准作为一个统一的数据共识，在标准...
- 产品推荐
- 这些文档可能帮助您