实时消费Kafka数据
BATCHSIZE:<num_records>TIMEOUT:][PROPERTIES:<kafka_property_name>:[.]][SCHEDULE:RETRY_INTERVAL:<retry_time>MAX_RETRIES:]数据库相关配置 参数 描述 是否必填 DATABASE 目标端 云原生数据仓库AnalyticDB PostgreSQL版 实例的数据库...
API概览
本产品（数据库自治服务/2020-01-16）的OpenAPI采用 RPC 签名风格，签名细节参见 签名机制说明。我们已经为开发者封装了常见编程语言的SDK，开发者可通过 下载SDK 直接调用本产品OpenAPI而无需关心技术细节。如果现有SDK不能满足使用需求，...
使用DTS迁移实例
单个数据迁移任务只能迁移一个数据库，如需迁移多个数据库，您需要为每个数据库配置数据迁移任务。增量数据迁移期间，如果迁移对象的选择粒度为Schema，在待迁移的Schema中创建了新的表或使用RENAME命令重建了待迁移的表，您需要在对该表...
不同阿里云账号下RDS实例间的数据同步
注意事项 DTS在执行全量数据初始化时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库
本文为您介绍如何使用数据传输迁移 OceanBase 数据库 MySQL 租户的数据至 MySQL 数据库。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输将主动...
DescribeImageSensitiveFileList-查询敏感文件
common_database_cfg：通用数据库连接配置 wordpress_database_cfg：WordPress 数据库配置 googlecloud_api_key：Google Cloud API Key vscode_sftp：VSCode SFTP 配置 apache_htpasswd：Apache htpasswd planetscale_token：Planetscale ...
配置数据迁移任务
当目标库为RDS MySQL时 DTS会自动在RDS MySQL中创建数据库，如果待迁移的数据库名称不符合RDS MySQL的定义规范，您需要在配置迁移任务之前在RDS MySQL中创建数据库。相关操作，请参见 创建数据库。费用说明 只需支付购买DTS专属集群的资源...
RDS PostgreSQL间的单向同步
其他限制 单个数据同步任务只能同步一个数据库，如需同步多个数据库，您需要为每个数据库配置数据同步任务。同步期间，如果同步对象的选择粒度为Schema，在待同步的Schema中创建了新的表或使用RENAME命令重建了待同步的表，您需要在对该表...
RDS PostgreSQL同步至RDS MySQL
其他限制 单个数据同步任务只能同步一个数据库，如需同步多个数据库，您需要为每个数据库配置数据同步任务。同步期间，如果同步对象的选择粒度为Schema，在待同步的Schema中创建了新的表或使用RENAME命令重建了待同步的表，您需要在对该表...
DescribeImageSensitiveFileByKey-查询镜像的敏感文件
common_database_cfg：通用数据库连接配置 wordpress_database_cfg：WordPress 数据库配置 googlecloud_api_key：Google Cloud API Key vscode_sftp：VSCode SFTP 配置 apache_htpasswd：Apache htpasswd planetscale_token：Planetscale ...
备份集自动归档到备份服务器
数据库配置表 类别 配置 说明 无 备份计划名称 DBS会自动生成一个任务名称，建议配置具有业务意义的名称（无唯一性要求），便于后续识别。备份源信息 备份方式 默认为创建计划时购买的备份方式，本示例为逻辑备份。数据库所在位置 此处选择...
配置数据同步任务
重要 任务使用的源数据库账号，需要具有元数据表mysql.user、mysql.db、mysql.columns_priv、mysql.tables_priv的SELECT权限；目标数据库账号，需要具有目标库的CREATE USER权限、GRANT OPTION权限和元数据表mysql.user的SELECT权限。目标...
使用DTS创建数据订阅
单个数据订阅任务只能订阅一个数据库，如需订阅多个数据库，您需要为每个数据库配置数据订阅任务。若您订阅的单行数据超过16MB，则不支持消费，否则可能会导致消费客户端内存OOM（Out of Memory）。请确认DTS对数据类型为FLOAT或DOUBLE的列...
DLF+EMR之统一权限最佳实践
创建数据库和表 create database db_a;create table db_a.table1(col1 string,col2 string,col3 string);create table db_a.table2(col1 string,col2 string,col3 string);create database db_b;create table db_b.table1(col1 string,col2...
概述
全球数据库网络（Global Database Network，简称GDN）是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。本文将介绍GDN特性等详情。GDN网络中所有集群的数据保持同步，网络中每个集群均提供读服务（写服务会被转发到主集群...
迁移 RDS PostgreSQL 实例的数据至 OceanBase 数据库 ...
本文为您介绍如何使用数据传输迁移 RDS PostgreSQL 实例 的数据至 OceanBase 数据库 Oracle 租户。重要 如果数据迁移项目长期处于非活跃状态（项目状态为 失败、已暂停 或 已完成），受增量日志保留时长等影响，项目可能无法恢复。数据传输...
使用SSMS迁移上云
本文以Azure SQL Database为例，介绍如何使用SQL Server Management Studio（SSMS）将您本地自建或其他云的SQL Server数据库迁移到 RDS SQL Server。前提条件 已创建存储空间大于源库的目标 RDS SQL Server 实例，且 RDS SQL Server 实例需...
实例告警
数据库自治服务DAS支持告警服务，本章节介绍如何查看和配置数据库实例的告警。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航栏，单击 实例告警。在 实例告警 页，...
实例告警
数据库自治服务DAS支持告警服务，本章节介绍如何查看和配置数据库实例的告警。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航栏，单击 实例告警。在 实例告警 页，...
实例告警
数据库自治服务DAS支持告警服务，本章节介绍如何查看和配置数据库实例的告警。操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，进入目标实例详情页。在左侧导航栏，单击 实例告警。在 实例告警 页，...
配置自定义证书
切换证书来源为 使用自定义证书，单击 配置数据库证书（防止伪装数据库）后的 配置 按钮，填写服务器证书及私钥后，单击 确定，完成配置。参数 取值 服务器证书 此参数填写 步骤一：获取自定义证书 步骤中获取的server.crt文件内容。请填写...
BUILD
通过Config配置BUILD调度的优先级 配置不同数据库中多张表的BUILD调度优先级：SET ADB_CONFIG RC_BUILD_TASK_PRIORITY_LIST=`<db1_name>.<table1_name>.;db2_name>.<table2_name>.<task_priority>`;说明 不同的表使用英文分号;隔开。例如...
创建并管理数据源
若您想在DataWorks操作您的数据库或数据仓库（例如，MaxCompute项目数据），需先在DataWorks的数据源管理页面，将数据库或数据仓库创建为DataWorks的数据源，并将该数据源绑定至DataWorks相应的功能模块使用。例如，同步MaxCompute数据前，...
备份数据库
数据库备份DBS 的 批量备份 功能支持备份单个数据库和多个数据库。本文以批量配置MySQL逻辑备份为例，向您介绍如何备份数据库。说明 关于各类数据库备份方案，请参见 备份方案概览。前提条件 已添加数据源。如何添加数据源，请参见 手动...
湖仓一体
指定数据库 通过在Catalog配置中设置 include_database_list 和 exclude_database_list，可以指定需要同步的数据库。include_database_list：支持只同步指定的Database，以英文逗号（,）分隔，默认同步所有Database。Database名称是区分大...
数据源开发和生产环境隔离
背景信息 同一个名称的数据源存在开发环境和生产环境两套配置，在配置数据源时，您可基于标准模式工作空间对应底层两个数据库或数据仓库的背景，针对不同环境设置不同的数据源信息。在同步任务执行过程中，可由执行环境控制离线同步任务所...
方案配置部署发布
方案预发环境配置 在预发环境上，方案配置取值。一般用于方案的预发调试。预发环境配置值优先级高于 方案的默认配置值。AB实验配置 AB实验粒度的配置取值，用于进行配置实验。在预发环境下，AB实验配置值优先级高于预发环境配置值。在正式...
恢复数据库
数据库备份DBS 提供数据恢复能力，通过创建恢复任务将已完成备份的数据恢复到云数据库、本地数据库或DBS沙箱中，可用于误操作后恢复以及分析历史数据等场景。前提条件 DBS备份计划的运行状态为 运行中。已完成数据库备份。相关操作，请参见...
权限管理与规范化数据开发
生产开发数据源 DataWorks支持基于标准模式工作空间对应的两个环境这一特性，来分别为这两个环境配置不同的数据库访问地址。即您可以在数据源配置界面分别为开发环境（DataStudio）测试运行时和生产调度时指定不同的数据库访问地址。同一个...
测试环境
本次测试对开源自建HBase与 云原生多模数据库 Lindorm 进行了多个场景的性能对比。环境配置 网络类型为专有网络。压测客户端、Lindorm实例与自建HBase实例处于同一可用区。开源自建HBase使用社区1.4.9版本。Lindorm宽表引擎为2.5.3.7版本。...
将MongoDB物理备份文件恢复至自建数据库
本文介绍如何将MongoDB物理备份文件中的数据恢复至本地自建MongoDB数据库。前提条件 实例类型为副本集。实例存储类型为本地盘版。实例未开启 TDE功能。实例的存储引擎为WiredTiger或RocksDB。如果实例的存储引擎为TerarkDB，请使用 逻辑...
Go-SQL-Driver/MySQL 连接 OceanBase 数据库示例程序
点击下载 go-oceanbase 示例工程 前提条件 安装 OceanBase 数据库、Go 语言和相关驱动，并确保已经正确配置了环境变量。安装 OceanBase 数据库 安装 Go 语言 安装 Go-SQL-Driver/MySQL 驱动 操作步骤 说明 本文中给出的操作步骤是在 ...
将MongoDB物理备份文件恢复至自建数据库
步骤四：副本集模式启动MongoDB数据库 云数据库MongoDB的物理备份默认带有原实例的副本集配置。启动时需以单节点模式启动，否则可能无法访问。如需以副本集模式启动，需要先 以单节点模式恢复MongoDB数据，再按照以下步骤执行：在命令行中...
使用流程
本文介绍如何创建和配置DBS备份计划、备份数据库以及恢复数据库，帮助您快速了解和上手数据库备份与管理操作。若您初次使用数据库备份DBS，请先了解 什么是数据库备份DBS。如需了解DBS是否支持备份恢复您的数据库，以及各类数据库备份恢复...
如何恢复数据到其它数据库实例
数据库备份DBS 支持恢复已有备份数据到源备份数据库实例上，同时也支持恢复到其它已有数据库实例上，包括RDS实例、ECS上的自建数据库等，可用于误操作后恢复以及分析历史数据等场景。本文以恢复到已有RDS实例为例介绍恢复操作。前提条件 已...
新建 TiDB 数据源
重要 您在 TiDB 数据库中配置的待订阅库表，需要和数据传输的数据迁移项目中配置的库表名保持一致。操作步骤 登录 OceanBase 管理控制台。在左侧导航栏，单击 数据传输>数据源管理。在 数据源列表 页面，单击右上角的 新建数据源。在 新建...
CREATE DATABASE
CREATE DATABASE语句用于创建数据库。本文为您介绍CREATE DATABASE的用法。...Superuser可以为其他用户创建数据库，并授权该用户为新数据库的Owner，方便用户自行管理和配置该数据库。示例 新建数据库的示例语句如下。CREATE DATABASE testdb;
DataWorks on EMR集群配置最佳实践
DataWorks支持绑定EMR（E-MapReduce）的DataLake（新版数据湖）集群为EMR计算引擎，创建Hive、MR、Presto和Spark SQL等节点，实现EMR任务...方式二：使用阿里云关系型数据库RDS（Relational Database Service）的两个不同数据库DataBase存储。
配置跨库Spark SQL节点
配置项 是否必填 说明 数据库 是 在下拉框中，搜索并选择目标数据库。重要 非安全协同模式的数据库，如果数据库的账号发生变更（如密码、权限变更），可能导致任务运行失败，需要重新登录数据库并保存节点配置。OSS路径 是 指定数据保存在...
Redis备份上云
数据库备份DBS支持备份自建数据库，并支持恢复到阿里云数据库，从而实现备份上云。本文以自建Redis备份上云为例，分3个部分介绍备份上云的完整操作步骤，即先将本地自建Redis数据备份至DBS中；再将DBS中的备份数据恢复至阿里云Redis；最后...
- 产品推荐
- 这些文档可能帮助您