从ECS上的自建MySQL同步至自建Kafka集群
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
Oracle数据源
说明 数据库容器CDB（Container Database）是Oracle 12c及之后版本的数据库新特性，用于承载多个可插拔数据库PDB（Pluggable Database）。使用限制 当前数据集成同步数据时，仅支持UTF8、AL32UTF8、AL16UTF16及ZHS16GBK编码格式。Oracle单...
恢复库表
参数 说明 恢复位置 恢复到原实例 恢复到新实例：后续根据 步骤5指引，自动新建一个RDS实例，将原实例的库/表数据恢复到新实例中，该过程不影响原实例。在新实例中验证数据后，您也可以把数据 迁移回原实例。说明 仅本地盘实例显示 恢复到...
入湖基础操作
关系数据库实时入湖：可以实现RDS MySQL或PolarDB数据库表数据增量同步到数据湖，选择在数据源管理中配置好的数据源，将数据源对应数据库中选定表的数据抽取binlog的方式将数据库表数据实时同步回放到数据湖中。待同步的数据表需确认包含...
无锁结构变更
背景信息 为解决变更数据库表结构时的锁表问题，ODC V4.2.0 版本提供了无锁结构变更功能，该功能可以较好地规避因锁表以致于阻塞业务。本文档旨在介绍如何通过提交无锁变更工单实现数据库无锁结构变更。ODC 支持的在线结构变更 分类 操作 ...
将RDS PostgreSQL作为RDS MySQL实时分析库
背景信息 当需要使用RDS PostgreSQL数据库特有的功能来分析MySQL中的数据，使用GIS处理时空数据或进行用户画像分析时，可以使用DTS功能将RDS MySQL中的数据实时迁移到RDS PostgreSQL数据库中，使PostgreSQL数据库作为MySQL的实时分析库。...
通过选择已有表新建数据集
背景信息 新建数据表支持的计算资源类型有MaxCompute、Hive、RDS MySQL、*ADB MySQL 2.0。说明 带星号（*）的云计算资源仅支持在特定场景使用。操作步骤 登录 数据资源平台控制台。在页面左上角单击 图标，选择 探索。在顶部菜单栏，单击 ...
SpringJDBC 连接 OceanBase 数据库
本文将介绍如何使用 Spring JDBC 框架、MySQL Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入和查询数据等。点击下载 spring-jdbc-mysql-client 示例工程 前提条件 您已安装 OceanBase 数据库...
用自然语言实时查看BI报表
相关内容 相关文档 关于PolarDB for AI PolarDB for AI使用说明 PolarDB for AI算法介绍 通过AAT连接AI和数据库表 自然语言到数据库查询语言转义 通义千问大模型数据推理和交互 更多免费体验 您可以前往 PolarDB for AI：在数据库中通过SQL...
数据脱敏
用户在执行查看表数据、SQL 窗口查询、结果集导出、导出工单、数据库变更工单操作时，包含的敏感列输出为脱敏数据。前提条件 项目管理员或者 DBA 支持管理敏感列和识别规则。所有用户均可查看、测试脱敏效果，不允许新建、编辑或者删除脱敏...
数据集成侧同步任务能力说明
说明 支持的变量解释：DATASOURCE_NAME_SRC：源端数据源名称 DB_NAME_SRC：源端数据库名称 TABLE_NAME_SRC：源表名称 DATASOURCE_NAME_DEST：目标端数据源名称 DB_NAME_DEST：目标端数据库名称 TABLE_NAME_DEST：目标表名称 DB_NAME_SRC_...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
Tomcat 连接池连接 OceanBase 数据库示例程序
本文将介绍如何使用 Tomcat 连接池、OceanBase Connector/J 和 OceanBase 数据库构建一个应用程序，实现基本的数据库操作，包括创建表、插入、删除、更新和查询数据等。点击下载 tomcat-mysql-client 示例工程 前提条件 您已安装 OceanBase...
错误码表（2.0版）
18001 Not support CREATE DATABASE in db:schema 无法在该数据连接上进行CREATE DATABASE操作，请检查所用数据库连接是否正确。18002 非ADS user导致的失败信息。操作必须由ADS user进行，请确认当前使用的UMM账号是ADS用户账号。18003 NA...
基于Delta lake的一站式数据湖构建与分析实战
通过DMS登录数据库，运行以下语句创建employees表，及插入少量数据。CREATE TABLE `employees`(`emp_no` int(11)NOT NULL,`birth_date` date NOT NULL,`first_name` varchar(14)NOT NULL,`last_name` varchar(16)NOT NULL,`gender` enum('M...
如何对JSON类型进行高效分析
传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到表的JSON类型列中，查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...
Hive数据迁移
表黑名单,格式为db.table 不需要迁移的Hive数据库表。单个表的格式为 dbname.tablename,多个表之间以英⽂逗号分隔。表白名单，格式为db.table 需要迁移的Hive数据库表。单个表的格式为 dbname.tablename，多个表之间以英⽂逗号分隔。单击...
查询并下载数据
若无可选数据源，可以单击+新建数据源 进行新建。单击 确定，完成即席查询文件的创建。根据项目的计算源或数据库SQL类型，编写查询数据的代码，单击 运行。如下图所示：查询语句执行成功后，可以在 结果 页签查看数据。下载结果数据 查询...
EMR Hive数据整库离线同步至MaxCompute
本文以阿里云EMR Hive离线同步写入MaxCompute场景为例，为您介绍如何一次性把EMR Hive整个数据库的数据离线同步至MaxCompute。背景信息 Hive是基于Hadoop的一个数据仓库工具，用来进行数据的提取、转化、加载，可以存储、查询和分析存储在...
EMR Hive数据整库离线同步至MaxCompute
本文以阿里云EMR Hive离线同步写入MaxCompute场景为例，为您介绍如何一次性把EMR Hive整个数据库的数据离线同步至MaxCompute。背景信息 Hive是基于Hadoop的一个数据仓库工具，用来进行数据的提取、转化、加载，可以存储、查询和分析存储在...
开启和使用冷数据分层存储
直接在OSS存储中新建数据表/索引/物化视图。方式一：CREATE时指定TABLESPACE OSS。CREATE TABLE tblname(.)TABLESPACE OSS;CREATE TABLE tblname(.)TABLESPACE OSS as SELECT.;CREATE INDEX idxname ON tblname(columnname)TABLESPACE OSS;...
开启和使用冷数据分层存储
直接在OSS存储中新建数据表/索引/物化视图。方式一：CREATE时指定TABLESPACE OSS。CREATE TABLE tblname(.)TABLESPACE OSS;CREATE TABLE tblname(.)TABLESPACE OSS as SELECT.;CREATE INDEX idxname ON tblname(columnname)TABLESPACE OSS;...
FineBI 6.0
本文测试了FineBI 6.0与 AnalyticDB MySQL 在连通性、列举表、查看表数据等方面的兼容性。测试环境 FineBI 6.0下载地址为 FineBI 6.0。测试范围 连接FineBI 说明 此处应填写MySQL数据库的连接...新建数据库连接 列举表 查看表结构 查看表数据
通过任务编排实现跨库数据同步
在MySQL数据库中新建订单表t_order、商品表t_product和用于同步数据分析结果的统计表t_order_report_daily。创建表名为t_order的订单表。将下列建表SQL语句粘贴到SQL书写区域，单击 执行。创建订单表t_order的SQL语句：CREATE TABLE `t_...
数据库管理
单击左侧导航栏中的 数据库管理，在 数据库管理 页面右上角，支持搜索数据库名称、登录数据库和新建数据库，详情参见 登录数据库、新建 MySQL 数据库。您可在数据库列表中查看 数据库名称、字符集、状态、已使用磁盘、绑定账号 等信息。...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库，并可以指定数据库的默认属性（如数据库默认字符集，校验规则等）。语法 create_database_stmt:CREATE {DATABASE|SCHEMA}[IF NOT EXISTS]database_name[database_option_list]database_option_list:...
复制数据库SQL Server 2008 R2版
若您需要创建一个与现有数据库数据完全相同的数据库，您可以使用复制数据库的方式。本文介绍如何通过RDS控制台复制并创建新的数据库。前提条件 实例版本为SQL Server 2008 R2。说明 SQL Server 2008 R2（本地盘）实例支持通过RDS控制台复制...
数据库克隆
数据管理DMS的数据库克隆功能支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化，例如将开发环境复制到测试环境。前提条件 源数据库与目标数据库类型相同，且都为MySQL。数据库实例的...
数据归档
背景信息 ODC 支持定时将源数据库中的表数据归档至其它目标数据库中，以解决因线上数据增多影响查询性能与业务运作的问题。本文档旨在介绍如何通过提交数据归档工单实现归档数据。原理介绍 前提条件 归档的表中必须包含主键。注意事项 前置...
创建数据库
语法 CREATE DATABASE name 参数 参数名称 描述 name 新建数据库的名称。描述 CREATE DATABASE命令可以用来创建一个新的数据库。说明 仅限超级用户、polar_superuser权限用户或者拥有createdb权限的用户才能创建数据库。带有createdb权限的...
CREATE DATABASE
CREATE DATABASE 用于创建一个新的PolarDB数据库。简介 CREATE DATABASE 创建一个新的PolarDB数据库。要创建一个数据库，你必须是一个超级用户或者具有特殊的 CREATEDB 特权。默认情况下，新数据库将通过克隆标准系统数据库 template1 被...
迁移 PolarDB-X 1.0 数据库的数据至 OceanBase 数据库...
背景信息 PolarDB-X 1.0 是由阿里巴巴自主研发的云原生分布式数据库，融合分布式 SQL 引擎和分布式自研存储 X-DB，基于云原生一体化架构设计。PolarDB-X 1.0 可以支撑千万级并发规模，以及百 PB 级海量存储。详情请参见 产品概述。PolarDB-...
数据方案概览
环境构建 数据库克隆 支持将源数据库的表结构和表数据复制至目标数据库中，实现全部表或部分表备份，适用多环境数据库初始化。测试数据构建 提供根据字段类型按照多种规则，自动化构建数据的能力。数据追踪/提供数据库Binlog日志的解析处理...
数据清理
背景信息 ODC 支持在源数据库中的数据归档到目标数据库后，删除源数据库中的数据，以提高数据库查询性能，降低在线存储成本。本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 ...
恢复MongoDB数据库
已选择的恢复时间点 选择需要恢复的时间，设置的时间必须在可恢复的时间范围内 恢复目标数据库 数据库所在位置 选择恢复目标数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 通过专线/VPN网关/智能网关接入的...
管理数据库（仅 MySQL）
单击左侧导航栏中的 数据库管理，在 数据库管理 页面右上角，支持搜索数据库名称、登录数据库和新建数据库，详情参见 登录数据库、创建数据库（仅 MySQL）。您可在数据库列表中查看 数据库名称、字符集、状态、已使用磁盘、绑定账号 等信息...
同数据库归档
当数据库中表的数据量过大时，可能会影响查询数据速率，在不考虑将数据迁移到其他数据库的情况下，您可以将数据库中的历史数据或使用频率低的冷数据归档在当前数据库下的其他表中。同时，结合DMS提供的归档时清理源表功能，帮助您提升数据...
API概览
DescribeSynDbTables 查看同步数据库与表 查看同步数据库与表。DeleteSyndb 删除同步任务 删除同步db。DescribeTransferHistory 查看迁移记录 查看迁移记录。TransferVersion 迁移版本 迁移版本。CreateServiceLinkedRole 创建服务关联角色...
湖仓一体
本章节介绍如何通过 云数据库SelectDB 提供的联邦查询技术，对数据湖、数据库、远端文件等外部数据源进行联邦分析。为您提供简单、快速的数据分析体验。概述 云数据库SelectDB 提供多源数据目录功能（Multi-Catalog或Catalog），支持对接...
数据库管理
DMS支持PostgreSQL的数据库（Database）管理与模式（Schema）管理。登录 数据管理DMS 5.0。在DMS左侧的实例列表中，右键单击目标实例，从弹出的列表中选择 数据库管理。若您需要管理模式，请在DMS左侧的实例列表中展开目标实例，右键单击...
- 产品推荐
- 这些文档可能帮助您