MySQL存储计算分离实践
本文主要说明如何基于阿里云数据库文件存储DBFS搭建MySQL数据库。背景信息 云上自建数据库通常会选用云盘和ext4文件系统作为MySQL数据库的文件存储。而基于DBFS构建，不但简化了用户基于块存储架构的复杂度，而且面向数据库场景，提供了...
ListDbfsAttachedEcsInstances-查询已挂载的ECS实例
调用ListDbfsAttachedEcsInstances查询数据库文件系统已挂载的ECS实例列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权...
恢复Oracle Standalone数据库的准备工作
操作概览 添加备份网关 确认源实例的Oracle版本号 创建Oracle SID 创建数据恢复目录 获取数据库程序目录 添加备份网关 数据库备份DBS 支持通过数据库网关DG（Database Gateway）将已备份的数据库恢复至本地或第三方云的私网。您需要在目标...
CancelAutoSnapshotPolicy-取消自动快照策略
取消一个或多个数据库文件系统的自动快照策略。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 ...
使用限制
IOPS min{1800+50*容量,1000000} min{1800+50*容量,8000000} 吞吐 min{100+0.5*容量,4000}MBps min{100+0.5*容量,32000}MBps 快照 限制项 限制 限制说明 每个文件系统可以保留的快照总数（包括手动快照与自动快照）256 1，当数据库文件系统...
【公告】数据库文件存储计费方式调整
尊敬的阿里云用户，阿里云将于2023年05月04日起调整数据库文件存储计费方式。调整时间 2023年05月04日18:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 调整前 调整后 计费方式 按小时计费，不足...
增量备份数据上云（SQL Server 2008 R2云盘、2012及...
您需要先将全量备份文件上传至阿里云的对象存储服务（OSS），并通过RDS控制台将全量备份数据恢复至指定的RDS SQL Server数据库中。然后通过RDS控制台将差异备份或日志备份文件导入该RDS SQL Server数据库中，以实现增量备份上云的效果。该...
TagDbfs-设置标签
调用TagDbfs为一个数据库文件系统设置标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 ...
ListSnapshot-查询快照
调用ListSnapshot查询用户创建的数据库文件系统快照列表。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求...
DeleteTagsBatch-批量删除标签
调用DeleteTagsBatch批量删除多个数据库文件系统实例的标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求...
全量备份数据上云（SQL Server 2008 R2云盘、2012及...
RDS SQL Server提供了将本地SQL Server数据库迁移到阿里云RDS SQL Server的数据库上云方案。您只需将本地SQL Server数据库的全量备份数据上传至阿里云的对象存储服务（OSS），然后通过RDS控制台即可将全量备份数据上云至指定RDS SQL Server...
MySQL分库分表同步至Hologres（方案2.0）
配置区域 参数 说明 读端配置 离线任务源端最大连接数 支持您通过该参数控制当前同步方案所产生的所有离线子同步任务可占用的源端数据库连接数，即同一时间内，当前同步解决方案所产生的所有离线子同步任务读取数据库的并发数上限。...
简介
只读实例可以满足大量的数据库读取需求，增加应用的吞吐量，实现读取能力的弹性扩展，分担数据库压力。使用场景 数据库有少量写请求，但有大量读请求。总览 GDB创建只读实例时会利用云盘快照功能，发起最新的数据快照，数据与主实例一致，...
FTP数据源
使用限制 FTP Reader实现了从远程FTP文件读取数据并转为数据同步协议的功能，远程FTP文件本身是无结构化数据存储。对于数据同步而言，目前FTP Reader支持的功能如下所示：支持 不支持 支持且仅支持读取TXT的文件，并要求TXT中的schema为...
名词解释
COMPACTION 〇 〇 Compaction（数据压缩）是一种数据管理技术，用于优化和减小数据库文件的大小，从而提高数据库性能。不同的存储引擎实现中存在不同的Compaction策略。INDEX 〇 ✖️ Index（索引）是一种数据结构，用于加快数据库中数据的...
MongoDB（公测中）
API 种类 DataStream和SQL 是否支持更新或删除结果表数据 是 特色功能 MongoDB的CDC源表，即MongoDB的流式源表，会先读取数据库的历史全量数据，并平滑切换到oplog读取上，保证不多读一条也不少读一条。即使发生故障，也能保证通过Exactly ...
AddTagsBatch-批量设置标签
调用AddTagsBatch为多个数据库文件系统实例批量添加标签，可能存在新增标签与替换标签。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前...
OSS-HDFS数据源
value：指定当前类型为常量，不从源头文件读取数据，而是根据value值自动生成对应的列。说明 文件数据列（index）和常量列（value）配置二选一。{"type":"long","index":0/从本地文件文本第一列（下标索引从0开始计数）获取LONG字段，index...
使用示例
本文主要介绍如何使用阿里云数据库文件存储服务DBFS。权限要求 读操作：root用户、普通用户均支持读操作。写操作：仅root用户支持进行写操作。场景示例 以下代码示例展示了在DBFS中创建文件、删除文件等基础操作。[root@iZbp156ycm6s06xj*]...
ALTER DATABASE
如果想要修改时序数据库的指定属性，或为其添加新的数据库属性，您可以使用 ALTER DATABASE 语句。引擎与版本 ALTER DATABASE语法 仅适用于时序引擎。无版本限制。语法 alter_database_statement:=ALTER DATABASE database_identifier[WITH...
功能特性
数据源配置管理 您可以在产品中添加多种不同类型的数据源配置，每个数据来源配置代表一个核对系统在后续核对工作中可以用来读取数据的数据来源配置，当前支持如下类型的数据源配置：OSS：OSS 文件系统的读取配置，需要您输入访问信息，...
DROP DATABASE
DROP DATABASE语法用于删除指定的数据库。引擎与版本 DROP DATABASE语法适用于宽表引擎和时序引擎。宽表引擎仅2.2.16及以上版本支持DROP DATABASE语法。时序引擎无版本限制。语法 drop_database_statement:=DROP DATABASE[IF EXISTS]...
Database外表联邦分析
使用JDBC方式访问外部数据库时使用PROFILE=Jdbc FORMAT '[TEXT|CSV|CUSTOM]' 读取文件的格式。formatting-properties 与特定文件数据对应的格式化选项：formatter或者delimiter（分割符）与CUSTOM搭配 formatter='pxfwritable_import' ...
数据导入
当您需要将大批量数据导入至数据库时，可以使用数据管理DMS提供的数据导入功能，导入SQL、CSV、Excel类型的文件。前提条件 数据库类型如下：关系型数据库 MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、PolarDB分布式版、AnalyticDB ...
将Excel的数据导入数据库
操作步骤 将Excel文件另存为.csv格式，并将中文或不符合数据库要求的列名修改为英文。说明 如果您的数据没有唯一的ID列，建议在最前方添加一列作为主键，便于以后进行存储和查询。通过DMS登录RDS数据库。选择目标数据库，在 SQLConsole 中...
通过DMS导入数据库文件
bdm721*_db@*【bdm721*.my3w.com:3306】文件编码 选择数据库的文件编码：UTF-8 GBK ISO-8859-1 自动识别 自动识别 导入模式 选择导入模式，当前支持两种导入模式：极速模式：在执行阶段读取文件，将SQL语句直接执行到指定的目标库。...
FTP Check节点
为了保证DataWorks成功读取完整的外部数据库的数据，此时，可以让其他调度系统在数据库中的数据写入任务完成后，在指定文件系统中进行文件标记（例如，生成一个.done 文件），表明该任务已完成。然后在DataWorks中配置一个FTP Check节点，...
导入数据
文件编码 选择数据库的文件编码：UTF-8 GBK ISO-8859-1 自动识别 导入模式 选择导入模式，当前支持两种导入模式：极速模式：在执行阶段读取文件，将SQL语句直接执行到指定的目标库。该模式安全性相比安全模式要低，但是执行时效较高。说明 ...
使用程序进行大数据导入
导入数据到 PolarDB-X 1.0 数据库 导出数据文件以后，可以通过代码的方式读取文件内容，然后导入到 PolarDB-X 1.0 数据库中。为了提高效率，建议通过批量插入的方式。以下是用 Java 写的一个 Demo。测试场景：插入8143801条数据，耗时916秒...
Redis客户端切换库提示“cannot switch to database:3...
cannot switch to database:3 解决方案 由于架构原因，原生的Redis集群版是不支持多数据库DB，可使用阿里云带有Proxy的集群，通过Proxy可使Redis集群版支持多DB，详情请参见 Redis Proxy特性说明。适用于 云数据库Redis
SHOW TABLES
SHOW TABLES语句用于展示数据库中满足查询条件的所有表。在使用CREATE TABLE语句建表前，您可以通过SHOW TABLES语句查看当前数据库已存在的表，避免重名报错。适用引擎 SHOW TABLES语法适用于宽表引擎和时序引擎。语法 show_tables_...
PAI-TF数据IO方式介绍
oss:GetObject 获取文件或文件夹对象 oss:ListObjects 查询文件列表信息 oss:DeleteObjects 删除对象 TensorFlow读取OSS数据的方法：低效的IO方式 本地执行TensorFlow代码和分布式云端执行TensorFlow的区别：本地读取数据：Server端直接从...
Hive数据源
您可以基于HDFS文件和Hive JDBC两种方式读取数据：基于HDFS文件读取数据 Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。...
外部表常见问题
基于外部表执行SQL作业时，运行慢的常见情况如下：OSS外部表中的GZ压缩文件读取慢 问题现象 用户创建了一个OSS外部表，数据源为OSS中的GZ压缩文件，大小为200 GB。在读取数据过程中执行缓慢。产生原因 由于Map端执行计算的Mapper数量过少，...
如何迁移到DBFS？
本文档主要为您说明在使用阿里云数据库存储DBFS时，如何方便的将数据库迁移到DBFS上。一般存在以下几种常用的方式：主备同步：搭建主备库，通过binary log同步...停机拷贝：停掉数据库服务，将数据库所有文件拷贝到DBFS，再拉起数据库服务。
使用说明
示例：在RW1上创建一个数据库 db1 CREATE DATABASE db1 POLARDB_WRITE_NODE 1;如果需要在RW2上创建数据库 db1，把上述示例中的1换成2即可。删除在指定RW节点上创建的数据库 删除在指定RW节点上创建的数据库。语法结构如下：DROP DATABASE ...
DROP CONTINUOUS QUERY
语法 drop_cq_statement:=DROP CONTINUOUS QUERY[database_identifier.cq_identifier]使用说明 数据库名（database_identifier）连续查询对象所属数据库的名称，不指定时默认是当前数据库。使用时必须在数据库名前后添加反引号（`），例如 ...
Proxool 连接池连接 OceanBase 数据库示例程序
user=test_user001&password=*步骤三：修改 proxool-mysql-client 项目中的数据库连接信息 根据 步骤二：获取 OceanBase 数据库 URL 中获取的信息修改文件 proxool-mysql-client/src/main/resources/db.properties 中的数据库连接信息。...
概述
3 创建 MySQL 数据库 在 tutorial_mysql 租户下，创建 tutorial_database 数据库。4 创建账号（MySQL 数据库用户）云数据库 OceanBase MySQL 租户下的账号即为 MySQL 数据库用户，接下来我们为tutorial_database 数据库创建一个超级账号 ...
Druid 连接池连接 OceanBase 数据库示例程序
user001&password=*&useSSL=false 步骤三：修改 druid-mysql-client 项目中的数据库连接信息 根据 步骤二：获取 OceanBase 数据库 URL 中获取的信息修改 druid-mysql-client/src/main/resources/db.properties 文件中的数据库连接信息。...
- 产品推荐
- 这些文档可能帮助您