数仓分层
数据引入层ODS（Operation Data Store）：存放未经过处理的原始数据至数据仓库系统，结构上与源系统保持一致，是数据仓库的数据准备区。主要完成基础数据引入到MaxCompute的职责，同时记录基础数据的历史变化。数据公共层CDM（Common Data ...
数仓分层
数据引入层ODS（Operation Data Store）：存放未经过处理的原始数据至数据仓库系统，结构上与源系统保持一致，是数据仓库的数据准备区。主要完成基础数据引入到MaxCompute的职责，同时记录基础数据的历史变化。数据公共层CDM（Common Data ...
如何对JSON类型进行高效分析
数据转换（Transformation）：对抽取的数据进行转换，使其符合数据仓库的数据模型和规范。包括数据清洗、数据整合、数据转换、数据增强和数据聚合等操作。数据加载（Loading）：将经过转换的数据加载到数据仓库中，包括维度表和事实表。...
确定需求
数据功能模块通常和业务板块紧耦合，对应一个或多个表，可以作为构建数据仓库的数据源。下表展现的是一个营销业务板块的数据功能模块。数据功能模块 A公司电商营销管理 商品管理 Y 用户管理 Y 购买流程 Y 交易订单 Y 用户反馈 Y 说明 Y代表...
确定需求
数据功能模块通常和业务板块紧耦合，对应一个或多个表，可以作为构建数据仓库的数据源。下表展现的是一个营销业务板块的数据功能模块。数据功能模块 A公司电商营销管理 商品管理 Y 用户管理 Y 购买流程 Y 交易订单 Y 用户反馈 Y 说明 Y代表...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
使用SSMS和BCP迁移SQL Server数据库
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。BCP 可以在SQL Server实例和用户指定格式的数据文件间大容量复制数据，您可以通过BCP实用工具将大量新行导入SQL Server表，...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
RDS术语
此外，它还提供了用于部署、监视和升级数据层组件（如应用程序使用的数据库和数据仓库）的工具以生成查询和脚本。实例 一个独立占用物理内存的数据库服务进程，是虚拟化的数据库服务器。可以设置不同的内存大小、磁盘空间和数据库类型。您...
AnalyticDB MySQL数仓版（3.0）使用流程
云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。数仓版（3.0）快速入门视频指导 ...
AnalyticDB MySQL湖仓版（3.0）使用流程
云原生数据仓库AnalyticDB MySQL版（简称ADB，原分析型数据库MySQL版）是云端托管的PB级高并发实时数据仓库，是专注于服务OLAP领域的数据仓库。本指南将指引您完成一次 AnalyticDB MySQL版 集群创建及使用。湖仓版（3.0）快速入门视频指导 ...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），依次将本地MongoDB分片集群数据库中的各个Shard节点，迁移至阿里云MongoDB分片集群实例来实现迁移上云。通过DTS的增量迁移功能，可以实现在本地应用不停服的情况下，平滑...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
如果源或目标数据库是ECS上的自建数据库，DTS会自动将对应地区DTS服务的IP地址添到ECS的安全规则中，您还需确保自建数据库没有限制ECS的访问（若数据库是集群部署在多个ECS实例，您需要手动将DTS服务对应地区的IP地址添到其余每个ECS的安全...
如何使用T+1全量同步一键建仓
根据业务需要，您也可以在 数据入湖 页面的 任务列表 页签中，在 操作 列单击 执行 随时手动发起数据同步操作，在目标数据仓库OSS中创建与数据源（RDS数据源、ECS自建数据库数据）相同的表结构、在DLA中创建对应的数据仓库表结构。...
INTO子句
示例 重命名数据库 SELECT*INTO"copy_NOAA_water_database"."autogen".:MEASUREMENT FROM"NOAA_water_database"."autogen"./.*/GROUP BY*name:result time written-0 76290 在TSDB For InfluxDB®中不能直接重命名数据库，所以 INTO 子句的...
数据库迁移
数据库迁移功能通过产品化解决方案的封装，实现数据库迁移、校验和清理的闭环操作。本文介绍如何通过创建工单实现数据库迁移。前提条件 支持的数据库类型：RDS...在延时时间区间内，如果需要恢复，可通过一键回滚功能恢复来源数据库中的数据。
使用DataWorks
选择离线同步任务的数据来源和数据去向，以及用于执行同步任务的资源组，并测试连通性。具体操作请参见 通过向导模式配置并运行数据同步任务。转换脚本模式并导入模板。单击工具栏中的转换脚本图标。如果脚本还未配置，您可以通过单击工具...
Catalog概述
例如，执行 CREATE DATABASE 和 CREATE TABLE 语句创建的数据库和数据表都由Internal Catalog管理。每个StarRocks集群都有且只有一个Internal Catalog名为 default_catalog。External Catalog：外部数据目录，用于管理外部数据源的访问信息...
Teradata应用迁移至AnalyticDB PostgreSQL
本文介绍如何将Teradata数据和应用迁移到 云原生数据仓库AnalyticDB PostgreSQL版。迁移原则 云原生数据仓库AnalyticDB PostgreSQL版 对Teradata语法有着很好的兼容。本指南在将TD数仓应用迁移至 AnalyticDB PostgreSQL 云化数仓过程中，...
查看表资产详情
血缘关联 单击 血缘关联，展现表的上下游来源，通过不断追溯，了解数据的来源和下游的使用情况。单击 图标，展开或收起对应血缘。单击 图标，展开对应字段，单击 图标，收起对应字段。单击 图标，展开所有字段，单击 图标，收起所有字段。...
湖仓一体
针对不同的数据目录和数据表格式，云数据库SelectDB 会进行列与列之间的关系映射。对于当前无法映射到SelectDB列类型的外表类型，如 UNION、INTERVAL 等。SelectDB会将列类型映射为UNSUPPORTED类型。对于UNSUPPORTED类型的查询，示例如下：...
通过Logstash导入数仓版
Logstash组件介绍 输入-采集各种样式、大小和来源的数据 在实际业务中，数据往往以各种各样的形式分散或集中地存储在多个系统中，Logstash支持多种数据输入方式，可以在同一时间从多种数据源采集数据。Logstash能够以连续的流式传输方式...
无感集成（Zero-ETL）
为了解决这些问题，阿里云瑶池数据库提供了无感集成（Zero-ETL）功能，可以快速构建业务系统（OLTP）和数据仓库（OLAP）之间的数据同步链路，将业务系统（OLTP）的数据自动进行提取、转换清洗和加载到数据仓库（OLAP），从而一站式完成数据...
账号类型
用户名和密码 访问云原生数据仓库MySQL版方式有很多种：通过阿里云控制台、客户端或者JDBC。...数据库用户名为AccessKey ID 数据库密码为AccessKey Secret 用户类型 数据库拥有者：...用户：被授权的数据库用户，由数据库拥有者授权时自动添加。
PHP访问（2.0版）
分析型数据库MySQL版端口号，可从分析型数据库MySQL版控制台获取端口号/连接云原生数据仓库AnalyticDB MySQL版2.0集群$ads_conn=mysqli_connect($ads_server_name,$ads_username,$ads_password,$ads_database,$ads_port);strsql="SELECT ...
管理数据库资产
支持加密审计的数据库需满足以下条件：数据库类型为自建数据库MySQL 5.6 加密算法为AES256-SHA和AES128-SHA（单向认证）如果您的MySQL数据库满足上述条件并配置了SSL证书，您需要打开 使用SSL 开关，并在 SSL密钥 处上传数据库使用的证书，...
迁移评估概述
目前支持进行对象评估的数据库类型及版本如下：Oracle 数据库：11g/12c/18c/19c MySQL 数据库：5.6/5.7/8.0 DB2 LUW 数据库（仅支持采集文件上传评估）云数据库 RDS PolarDB MySQL 引擎 支持对 Oracle 和 MySQL 数据库的 DDL 语句进行兼容...
管理数据库资产
在审计数据库前，您必须在数据库审计系统中添加要审计的数据库。本文介绍如何在数据库审计系统中管理数据库。背景信息 关于数据库审计支持的数据库类型，请参见 支持的数据库类型。添加数据库 您可以参考以下步骤在数据库审计系统中添加要...
全球数据库市场发展与机遇
数据库起源于上世纪70年代，在技术发展浪潮中历久弥新，已成为IT科技的核心技术之一，支撑着现代社会的经济活动和商业文明。长期以来，全球商业化数据库主要以Oracle、IBM、Microsoft、SAP传统四大厂商为主。随着新金融、新零售、新制造、...
数据迁移和同步方案概览
云数据库MongoDB提供了多种数据迁移和同步方案，可满足不同业务场景下MongoDB数据库的数据迁移和同步需求。影响 如果实例的数据库小版本过期或不在维护列表内，当执行以下操作时，为保证提供更出色的性能和稳定性，系统会默认将您的数据库...
从自建Db2迁移至RDS MySQL
数据迁移流程 为解决对象间的依赖，提高迁移成功率，DTS对Db2数据库结构和数据的迁移流程如下：执行表结构和索引的迁移。执行全量数据迁移。执行外键的结构迁移。执行增量数据迁移。增量数据迁移前准备工作 在配置增量数据迁移任务之前，您...
SQL命令管理数据库
您可以执行以下命令，查询SQL Server实例的所有数据库的数据文件和日志文件的路径信息：SELECT db_name(database_id),physical_name FROM sys.master_files;删除数据库 执行如下命令，删除数据库：DROP DATABASE[TestDb]需注意，若您在删除...
数据库管理
数据库（Database）是表、索引、视图、存储过程、操作符的集合。您可以在一个 AnalyticDB PostgreSQL 实例中创建多个数据库，但是客户端程序一次只能连接上并且访问一个数据库，无法跨数据库进行查询。创建数据库 使用 CREATE DATABASE ...
转换计费方式
按量付费的 云原生数据仓库AnalyticDB MySQL版 3.0 集群可以转为包年包月集群。本文介绍按量付费转包年包月的操作说明。背景信息 按量付费变更为包年包月，需要支付包年包月费用，请确保余额充足。操作步骤 登录 云原生数据仓库AnalyticDB ...
Microsoft Azure Database for MySQL数据库迁移到阿里...
本文介绍Microsoft Azure Database for MySQL数据库迁移到阿里云的步骤及注意事项。前提条件 源端及目标端 要求 相关参考 源端 Microsoft Azure Database for MySQL实例 已开通公网访问，并获取外网连接地址及端口。已创建高权限账号。如果...
从自建Db2迁移至RDS MySQL
数据迁移流程 为解决对象间的依赖，提高迁移成功率，DTS对Db2数据库结构和数据的迁移流程如下：执行表结构和索引的迁移。执行全量数据迁移。执行外键的结构迁移。执行增量数据迁移。增量数据迁移前准备工作 在配置增量数据迁移任务之前，您...
CREATE[PUBLIC]DATABASE LINK
CREATE[PUBLIC]DATABASE LINK创建一个数据库连接。语法 CREATE[PUBLIC]DATABASE LINK<name>CONNECT TO { CURRENT_USER|<username>IDENTIFIED BY"<password>"} USING {()|'<oracle_connection_string>' } 参数说明 参数 说明 PUBLIC 创建...
多租户管理使用说明
简介 PolarDB MySQL版 提供的多租户模式，可以使得多个租户在同一个集群下共享计算资源和存储资源，且保证各租户下的数据隔离和资源隔离。各个租户仅能访问到自己的数据，租户之间不会出现资源争抢，以保证业务的稳定运行。技术原理如下图...
- 产品推荐
- 这些文档可能帮助您