数仓分层
在阿里巴巴的数据体系中，我们建议将数据仓库分为三层，自下而上为：数据引入层（ODS，Operation Data Store）、数据公共层（CDM，Common Data Model）和数据应用层（ADS，Application Data Service）。数据仓库的分层和各层级用途如下图所...
权限列表
支持查看 企业数据智能平台 各组件的功能权限和数据权限。本文介绍如何查看各组件的权限内容。前提条件 使用权限账号登录 企业数据智能平台。查看权限列表 登录企业数据智能平台。在页面右上角，单击 图标，选择 系统设置。在页面左侧导航...
新增实时任务
数据同步支持实时同步任务的新建，并支持一键启动多个上云任务，实现全量任务自动建表。本文以同步Kafka数据源到DataHub目标端为例，介绍如何新增实时任务。前提条件 已存在对应数据源，具体操作，请参见 新建数据源。已完成源端数据和目标...
通过实时计算Flink版读取云原生数据仓库AnalyticDB ...
本文介绍如何通过阿里云实时计算Flink版实时读取 云原生数据仓库AnalyticDB PostgreSQL版（原分析型数据库PostgreSQL版）数据，包括版本限制、语法示例、创建和运行Flink作业、WITH参数、CACHE参数、类型映射和参数支持等。版本限制 创建3....
影响查询性能的因素
背景信息 集群规格 AnalyticDB MySQL版 集群支持多种规格（更多详情，请参见 规格），不同集群规格的CPU核数、内存大小和数据存储介质等属性不同，处理子任务的能力也就不同，因此您需要结合业务查询特征来选择集群规格。例如，以Join或...
DBeaver
背景信息 DBeaver是一款免费、开源（GPL）的专门为开发人员和数据库管理员提供的通用数据库工具。DBeaver支持MySQL、PostgreSQL、Oracle、DB2、MSSQL、Sybase以及其他兼容JDBC的数据库。您可以通过DBeaver的图形界面查看数据库结构、执行...
Quick BI连接
说明 通过公网连接Quick BI和数据库时，需要将Quick BI的IP地址添加至数据库白名单中，确保网络连通。您可以在Quick BI控制台的数据源配置界面，单击 复制白名单，获取Quick BI的IP地址。配置项 说明 显示名称 数据源名称。数据库地址 ...
配置逻辑表关联字段标准
通过关联数据标准中的标准字段，实现字段值的统一和规范化，帮助您管控治理后数据的一致性和数据质量。本文介绍如何配置逻辑表关联标准字段。前提条件 已新建数据元、指标、维度以及度量等，具体操作，请参见 新建数据元、新建指标、新建...
新建数据模版
相关操作 在模板管理页面，可对模板进行以下操作：操作 说明 查看模板详情 在模板列表，单击目标模板 操作 列的 查看，查看模板的基础信息和数据字段。编辑模板 在模板列表，单击目标模板 操作 列的 编辑，对模板的信息进行编辑。删除模板 ...
功能简介
在实际的业务系统中，数据来源多种多样的，不同数据对数据处理的时延和数据量的要求不同，这就需要综合多种不同的平台，包括批量、流式环境等。进行数据处理时，上一个平台计算完毕后把数据传递给下一个平台进行计算，多个平台互相配合来...
导出维度及属性
通过导出维度以及属性功能，搭配导入功能，您可以快速实现工作组间的维度以及属性迁移。本文介绍如何导出维度以及属性。...其中，维度属性的值域信息请在数据标准页签查看，维度列表信息在维度列表页签和数据标准页签都可以查看。
导入维度及属性
打开模板，按照模板示例填写维度以及维度属性参数（需填写维度列表和数据标准页签中内容），填写完成后保存。说明 待导入文件的维度列表页签中的维度名称、唯独代码和描述字段均需要填写。方式二：从系统导出的维度文件。根据实际需要选择 ...
步骤四：运行节点
运行节点，验证处理逻辑和数据的准确性。本文介绍如何运行开发节点。前提条件 已设置开发计算资源、生产计算资源、节点输入和节点输出参数，具体操作请参见 步骤三：设置运行配置参数。操作步骤 单击画布工具栏的 图标，运行节点。这里以...
数据库对象的逻辑结构
zj|xiaoxia.zj|UTF8|en_US.utf8|en_US.utf8|1062 MB|pg_default|在一个表空间上拥有CREATE权限的用户可以在其中创建数据库对象，例如表、索引和数据库。示例如下。CREATE TABLE tablename(options)TABLESPACE spacename;
操作流程
适用于离线类节点 运行开发节点 运行节点，验证处理逻辑和数据的准确性。具体操作，请参见 步骤四：运行开发节点。设置调度信息 当离线计算节点需要按照周期输出数据时，支持通过设置节点的调度信息，实现节点中各数据被周期计算。具体操作...
自建HBase迁移至云原生数据仓库 AnalyticDB MySQL 版 ...
前提条件 自建HBase和 云原生数据仓库AnalyticDB MySQL版 3.0支持的版本，请参见 迁移方案概览。已创建目标 云原生数据仓库AnalyticDB MySQL版 3.0，详情请参见 创建集群。目标 云原生数据仓库AnalyticDB MySQL版 3.0实例的存储空间须大于...
包年包月资源隔离
基于不同的业务创建不同的MaxCompute项目：数据仓库开发和生产：按照数据仓库模型分层划分MaxCompute项目，分为数据仓库开发项目和数据仓库生产项目。运营分析需求：根据业务需求创建不同部门专用的MaxCompute项目，获取日常数据并进行分析...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
确定需求
您在构建数据仓库之前，首先需要确定构建数据仓库的目标与需求，并进行全面的业务调研。您需要了解真实的业务需求，以及确定数据仓库要解决的问题。业务调研 充分的业务调研和需求分析是数据仓库建设的基石，直接决定数据仓库能否建设成功...
功能简介
数据同步为用户提供批量、实时多源异构数据的便捷同步或接入能力，系统提供完善的数据接入配置、任务运行监控等功能，有效保障数据接入的稳定性和可控性，满足各类平台、数据源及应用系统间的数据汇聚需求。通过数据同步的自定义同步任务...
数据质量教程概述
准确性 准确性是指数据记录中信息和数据是否准确、不存在错误或异常。例如，在本教程中，如果UV、PV数值小于0，则明显是错误数据。一致性 对于不同的业务流程和节点，同一份数据必须保持一致性。例如表 province 字段中如果有 浙江、ZJ 两...
数据质量教程概述
准确性 准确性是指数据记录中信息和数据是否准确、不存在错误或异常。例如，在本教程中，如果UV、PV数值小于0，则明显是错误数据。一致性 对于不同的业务流程和节点，同一份数据必须保持一致性。例如表 province 字段中如果有 浙江、ZJ 两...
存储引擎
数据压缩类型：压缩算法支持ZLIB、ZSTD和LZ4等，高压缩率可显著降低数据存储成本，并通过高带宽解压缩性能降低IO时间。外表OSS存储：数据可远端低成本存储于OSS上，查询和写入行为与本地表完全一致。数据分区：支持数据多级分区，且可按...
账号类型
用户名和密码 访问云原生数据仓库MySQL版方式有很多种：通过阿里云控制台、客户端或者JDBC。通过客户端或者JDBC访问时，需要数据库的用户名和密码，前面提到云原生数据仓库MySQL版账号是基于阿里云账号体系，所以数据库账号和密码为阿里云...
预览物理表数据
数据查询提供不同数据资源的预览，可为开发人员、数据应用人员和数据分析人员提供全面直观的数据呈现。本文介绍如何预览物理表数据。前提条件 已新建云计算资源，具体操作，请参见 新建云计算资源。操作步骤 登录企业数据智能平台。在页面...
功能简介
数据标准 模型设计者可通过设计标准数据元素，定义关键业务对象、业务对象属性及值域，规范标准数据字典，制定并管理平台遵循的统一数据标准，帮助平台管理者和数据管理者管控治理后数据的一致性和数据质量。数据建模 支持ER模型和维度模型...
DataWorks数据集成
说明 具体操作步骤请参考DataWorks 通过脚本模式配置离线同步任务 数据导出 数据导出的步骤和数据导入的步骤一样，区别是在数据导出中，数据源配置需要配置为 AnalyticDB PostgreSQL版（参见 配置AnalyticDB for PostgreSQL数据源），而...
DBeaver（2.0版）
本文介绍如何通过DBeaver连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。开始使用DBeaver之前，您需要先完成以下准备工作。安装DBeaver。安装MySQL JDBC驱动。操作步骤 打开 DBeaver，单击 数据库>新建连接。在 创建新连接 页面，...
云原生数据仓库AnalyticDB MySQL版系统权限策略参考
本文描述云原生数据仓库AnalyticDB MySQL版支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里...
查看我可管理的资产
当需要查看目标数据表资产详情时，在该数据表 操作 列，单击 查看，可查看字段信息、数据预览、血缘关联和数据质量。单击 字段信息，显示分区及非分区字段信息，更多信息，请参见 查看表资产详情。单击 数据预览，显示数据表详细内容信息，...
Navicat（2.0版）
本文介绍如何通过Navicat连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用Navicat for MySQL之前，需要先安装Navicat for MySQL。操作步骤 打开Navicat for MySQL，单击 文件>新建连接>MySQL。在 新建连接 页面，...
DBVisualizer（2.0版）
本文介绍如何通过DBVisualizer连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。准备工作 开始使用DBVisualizer之前，需要先完成以下准备工作。下载并安装MySQL JDBC驱动。下载并安装DBVisualizer。操作步骤 打开DBVisualizer，...
【停售公告】停止售卖云原生数据仓库AnalyticDB ...
阿里云停止售卖 云原生数据仓库AnalyticDB MySQL版 2.0 集群。...建议 建议您将 云原生数据仓库AnalyticDB MySQL版 2.0 的数据和应用迁移至 云原生数据仓库AnalyticDB MySQL版 3.0。详情请参见 AnalyticDB MySQL 2.0数据导入。
功能简介
数据预览 支持不同云计算资源数据的快速预览，可为开发人员和数据应用人员提供全面直观的数据呈现。支持MaxCompute、RDS MySQL、PostgreSQL、AnalyticDB PostgreSQL多种云计算资源进行物理表数据预览，可快速对各类数据资源下的物理表的...
SQL WorkBench/J（2.0版）
本文介绍如何通过SQL WorkBench/J工具连接和管理 云原生数据仓库AnalyticDB MySQL版 2.0集群。前提条件 开始使用SQL WorkBench/J之前，您需要先完成以下准备工作。下载并安装MySQL JDBC驱动。下载并安装SQL WorkBench/J。操作步骤 打开SQL ...
生态集成
云原生数据仓库AnalyticDB PostgreSQL版 具备完善和开放的生态系统，支持无缝对接业界以及阿里云生态的数据管理工具，BI报表可视化工具，ETL工具，数据迁移工具，同时可以与业界流行的流式处理系统，日志类系统，大数据类系统，传统数仓及...
连接2.0集群
连接地址和端口 登录 云原生数据仓库AnalyticDB MySQL版管理控制台，在 连接信息 处查看连接地址和端口。通过外网连接2.0集群时，使用经典网络地址连接串。通过内网连接2.0集群时，使用VPC地址连接串。用户名和密码 用户名和密码是指用户...
消除数据重分布
决定查询成本的其他因素是它的运行频率，以及它对其他查询和数据库操作的影响程度。确定成本最高的查询使用的表，并评估它们在查询执行中的作用，考虑表是如何join和聚合的。对于一个大表join多个小表的场景，类似star schema，采用大表...
产品概述
云原生数据仓库 AnalyticDB PostgreSQL 版 是一种大规模并行处理（MPP）数据仓库服务，可提供海量数据在线分析服务。云原生数据仓库 AnalyticDB PostgreSQL 版 基于开源项目Greenplum构建，由阿里云深度扩展，兼容ANSI SQL 2003，兼容...
Database外表联邦分析
说明 本特性只支持存储弹性模式实例，且需要 云原生数据仓库 AnalyticDB PostgreSQL 版 实例和目标访问的外部数据源处于同一个VPC网络。2020年9月6日前申请的存量存储弹性模式实例，由于网络架构不同，无法与外部数据库网络打通，无法使用...
- 产品推荐
- 这些文档可能帮助您