场景：配置分库分表离线同步任务
说明 仅MySQL、PolarDB、AnalyticDB支持通过向导模式添加分库分表，其他数据库请切换至脚本模式配置分库分表同步。脚本模式配置分库分表：脚本示例如下，完整的任务配置步骤请参见 通过脚本模式配置离线同步任务。重要 实际运行时，请删除...
T+1多库合并建仓
背景信息 在数据库应用中，当单个关系型数据库RDS（Relational Database Service）的数据量越来越多时，相应的数据查询时间也会延长，影响用户体验。为保证业务可以继续使用RDS数据库，业务端通常会采用分库分表技术，将一个RDS数据库中的...
配置MySQL输入
MySQL输入基于Binlog实时订阅的方式，实时读取您配置的MySQL数据库表数据。本文为您介绍，如何配置MySQL输入，以及配置输入之前需要准备的网络环境及账号权限。前提条件 配置MySQL输入之前，请确保已完成以下规划与准备工作。已配置同步...
MySQL分库分表同步至Hologres（方案2.0）
需求分析 场景描述：MySQL实例有三个分库分表数据库 order_db01、order_db02、order_db03。业务上有两种逻辑表：订单表 t_order 和用户表 t_user，其中每张逻辑表分别对应三个数据库下的两张物理表。如下图所示总共3个物理库，12张分表，...
注意事项
如果数据库分片集群是分库分表模式，则所有数据库分表都需要配置分库分表规则，如果数据库分片中只有单表，分库分表规则可以直接配置 0 即可。在如下配置中，single_table 会路由到 group_00 分片：使用限制 仅支持 DML 语句（INSERT、...
离线同步能力说明
数据集成的离线同步功能为您提供数据读取（Reader）和写入插件（Writer），方便您通过定义来源与去向数据源，并结合DataWorks调度参数使用，将源端数据库中全量或增量数据的同步至目标数据库中。本文为您介绍离线同步的相关能力。使用限制 ...
数据传输作业：数据集成
实时同步 DataWorks提供的实时数据同步功能，使用单表或整库同步方式，将源端数据库中部分或全部表的数据变化实时同步至MaxCompute中，实现MaxCompute实时保持和源库的数据对应。一个实时同步任务支持多个转换插件进行数据清洗，并支持多个...
通过脚本模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
通过向导模式配置离线同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。离线同步支持的数据源及其配置详情请参见 支持的数据源与读写插件。说明 数据...
新功能发布记录
设置任意时间点保护策略 数据库备份DBS serverless规格 数据库备份DBS 新增serverless规格，该规格备份计划能够根据数据源负载情况动态优化备份任务资源与速度，适用于备份数据量小且期望节约成本的场景。说明 serverless规格当前只支持...
Map模型
} } 处理分库分表数据的Demo示例（适用于Map或MapReduce模型）@Component public class ScanShardingTableJobProcessor extends MapJobProcessor {@Service private XXXService xxxService;private final int PAGE_SIZE=500;static class ...
分库分表
数据库访问代理在后端将数据量较大的数据表水平拆分到各个 RDS 数据库中，后端的这些 RDS 数据库被称为分库，分库中的表被称为分表。拆分后，每个分库负责一份数据的读写操作，从而有效的分散了整体访问压力。在系统扩容时，只需要水平增加...
数据同步模版
分库分表合并 当同一份业务数据分散在不同的数据库或者业务表时，我们往往需要用到分库分表合并的能力，将表结构相似的分库分表的数据同步到一张目标表中。Flink CDC可以自动同步源中所有分库分表的全量和增量数据（包括新增的符合正则表达...
RDS/PolarDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
RDS/PolarRDB 数据源配置分库分表
一般用户的分库分表分两种情况：单库多表：database1 table1、table2、table3、table4.多库多表：database1 database2 database3.table1、table2、table3、table4.table1、table2、table3、table4.table1、table2、table3、table4.这两种...
创建防护策略
在 数据库防护策略 面板，为数据库创建防护策略。配置您要防护的数据库的信息，然后单击 下一步。配置项 说明 策略名称 设置防护策略的名称。类型 自动识别数据库 系统会自动识别出您服务器上已安装的数据库。建议您使用此功能快速选择您要...
管理MySQL Catalog
例如，有一个分库分表的MySQL数据库，包括user01、user02和user99等多个表，分散在db01~db10等数据库中，且所有表的Schema都相互兼容，则可以通过如下正则表达式的库名表名来访问到所有user的分库分表。SELECT.FROM `db.*`.`user.*`/*+...
自定义 HINT
HINT 作为一种 SQL 补充语法，在关系型数据库中扮演着非常重要的角色。它允许用户通过相关的语法影响 SQL 的执行方式，从对 SQL 进行特殊的优化。同样，数据访问代理也提供了自定义的 HINT 语法。HINT 使用基本语法：/*+DBP:hint 语句*/SQL...
应用场景
业务复杂度高是该类业务的典型特征 典型的应用场景如下：分库分表后的跨数据库分布式事务 例如支付宝的交易服务，随着业务规模的增大，单个交易流水表已经不能满足业务需求，需要通过分库分表实现数据水平拆分。但是水平拆分后，单表的数据...
通过代理连接地址连接数据库
数据库连接页 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏中单击 数据库连接。在 数据库代理连接 区域即可查看数据库代理连接地址和端口。说明 在 数据库连接 页面，您可以申请和释放外网代理连接地址。数据库...
拆分函数概述
PolarDB-X 1.0 是一个支持既分库又分表的数据库服务。本文将介绍 PolarDB-X 1.0 拆分函数的相关信息。拆分方式 在 PolarDB-X 1.0 中，一张逻辑表的拆分方式由拆分函数（包括分片数目与路由算法）与拆分键（包括拆分键的 MySQL 数据类型）...
通过代理连接地址连接数据库
数据库连接页 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。在左侧导航栏，单击 数据库连接。在 数据库代理连接 区域即可查看数据库代理连接地址和端口。说明 在 数据库连接 页面，您可以修改数据库代理连接地址和端口、申请外...
API概览
修改自动快照策略后，之前已设置该策略的数据库文件系统随即执行修改后的自动快照策略。GetAutoSnapshotPolicy 查询单个自动快照策略 查询单个自动快照策略。ListAutoSnapshotPolicies 列出自动快照策略 查询您在某个地域下，所有已创建的...
PolarDB-X 1.0的分库分表是什么意思？
关于 PolarDB-X 1.0 的分库分表的相关说明，请参见 拆分函数概述。
管理防护策略
在 数据库防勒索 页签下的防护策略列表中，定位到您要停用或者启用的防护策略，在该策略的 策略状态 列启用或停用策略。停用策略 如果您想停用某个策略，您可以在 策略状态 列，关闭策略状态的开关。重要 策略停用后，数据库防勒索的数据...
应用场景
该场景可实现：在离线一体化 支持数据实时增删改、具备在线分析和ETL计算一体化，实现大数据与数据库的融合。通过资源组隔离让在离线计算任务不相互影响，保证业务稳定运行。计算存储资源弹性 采用计算存储分离架构，计算资源和存储资源按...
限制说明
项目 限制说明 数据类型 云数据库 Memcache 版仅支持 Key-Value 格式的数据，不支持 array、map、list 等复杂类型的数据。数据可靠性 云数据库 Memcache 版的数据存储在内存中，服务并不保证缓存数据不会丢失，有强一致性要求的数据不适合...
备份数据库
数据库备份DBS 的 批量备份 功能支持备份单个数据库和多个数据库。本文以批量配置MySQL逻辑备份为例，向您介绍如何备份数据库。说明 关于各类数据库备份方案，请参见 备份方案概览。前提条件 已添加数据源。如何添加数据源，请参见 手动...
创建数据库账号
MySQL、SQL Server、PostgreSQL 登录 云数据库专属集群控制台。在页面左上角，选择目标地域。在目标专属集群的 操作 列，单击 详情。在左侧导航栏，单击 实例列表，然后单击目标实例。在左侧导航栏，单击 账号管理，然后单击 创建账号。在...
创建备份策略模板
数据库备份DBS 支持用户自定义创建数据库备份策略模板，该模板包含备份方式、存储方式、备份频率、备份周期、备份开始时间等配置项。本文介绍创建备份策略模板的方法，帮助用户更好地管理数据库备份。操作步骤 访问 备份策略列表，在上方...
什么是数据库审计
数据库审计服务还具备强大的数据库活动审计分析能力，从多个角度灵活呈现数据库的活动状态，帮助您有效执行安全策略。采用全新的人机交互操作模式，基于人性化、专业化和可用性三个层面设计产品界面。在审计日志统计分析方面，数据库审计...
自动弹性伸缩
数据库自治服务DAS（Database Autonomy Service）提供自动弹性伸缩功能，根据您预设的策略，输出数据库实例的扩容建议，并在数据库实例性能达到设置阈值时，对数据库实例进行扩容或回缩操作。功能介绍 说明 数据库自治服务DAS从2022年2月18...
堡垒机的审计事件
CreateDatabaseMaskPolicy 创建数据库脱敏策略。CreateDatabases 批量创建数据库。CreateHost 在堡垒机中创建需要运维的主机。CreateHostAccount 为指定主机创建主机账号。CreateHostGroup 创建主机组。CreateHosts 批量创建主机。...
创建账号
拥有实例下所有数据库的权限。可以断开任意账号的连接。普通账号 可以通过控制台、API或者SQL语句创建和管理。一个实例可以创建多个普通账号，具体的数量与实例内核有关。普通账号默认仅拥有登录数据库的权限，您需要手动给普通账号授予...
开通数据库代理
如果您的主实例因连接数过多导致负载较高，或因业务需求要进行读写分离，可以参考本文开通RDS PostgreSQL数据库代理功能。该功能支持读写分离、事务拆分等能力，能够有效降低主实例访问压力。前提条件 RDS PostgreSQL实例需要满足以下要求...
聚合支付方案
解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行水平拆分，有效解决订单的存储上限及业务高峰时的高并发压力，借助了DRDS对MySQL语法的高度兼容能力，轻松从原来单体数据库升级到...
基于预测自动弹性伸缩
为了应对业务增长和数据库高负载所带来的性能挑战，数据库自治服务DAS提供基于预测的自动弹性伸缩策略，通过实例过去10天的历史数据预测未来24小时的性能指标，并在预测的性能指标达到阈值时主动提供扩容建议。前提条件 支持如下数据库引擎...
逻辑库
等于1 等于1时，仅存在分表的单个数据库会抽取成逻辑库。使用场景 如下为典型的逻辑库场景：单库-分表 分库-分表 分库-不分表 注意事项 SQL Console数据查询、结构设计、数据导出、数据变更等功能支持选择物理库或者逻辑库操作。选择逻辑库...
开通数据库代理
RDS MySQL数据库代理支持读写分离、连接保持、SSL加密等功能，能够降低主实例负载，提高实例可用性和安全性。本文介绍通过RDS控制台和API接口开通RDS MySQL数据库代理的方法以及推荐代理规格的计算方式。前提条件 主实例需满足以下条件：...
数据库自治服务系统权限策略参考
本文描述数据库自治服务支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。什么是系统权限策略 权限策略是用语法结构描述的一组权限的集合，可以精确地描述被授权的资源集、操作集以及授权条件。阿里云访问控制（RAM）...
- 产品推荐
- 这些文档可能帮助您