使用DMS和DG管理本地或第三方云数据库
阿里云数据库网关DG（Database Gateway）支持在不暴露公网IP的前提下，将本地自建或第三方云厂商的数据库与阿里云服务连接起来，避免使用公网IP连接的安全风险。您可以通过数据库网关将本地或第三方云数据库录入DMS进行管理。背景信息 将...
日志备份时报：The transaction log for database xx ...
RDS SQL Server数据库实例进行日志备份时，出现 The transaction log for database xx is full due to 'LOG_BACKUP' 事务日志已满的报错，您可以参照本文进行操作，解决报错问题。问题现象 RDS SQL Server数据库实例进行日志备份时，报 The...
功能特性
挂载DBFS 卸载DBFS 从ECS云服务器上卸载数据库文件存储 卸载DBFS 扩容DBFS 支持业务友好地在线扩充存储容量 在线扩容 格式化DBFS 格式化数据库文件存储操作会清空已写入的数据，建议操作前创建快照备份数据库文件存储的数据-重命名DBFS ...
一键实时同步至Hologres
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
创建账号
CREATE DATABASE 命令默认通过复制template1来创建数据库。通过该方式创建的数据库，Public Schema的Owner均为第一个高权限账号。第一个高权限账号的Comment开头会包含说明：template1 public schema owner。普通账号 可以通过控制台、API...
非持久设置
持久性是数据库的一个保证已提交事务的记录的特性（即使是发生服务器崩溃或断电）。然而，持久性会明显增加数据库的负荷，因此如果你的站点不需要这个保证，本数据库可以被配置成运行更快。在这种情况下，你可以调整下列配置来提高性能。...
数据集成概述
说明 以业务数据库数据同步到MaxCompute数据仓库为例，当有大量的数据存储在数据库系统里，需要将数据库中的全量及增量数据同步到MaxCompute进行数仓分析时，数据集成传统方式是通过全量同步或者依赖数据库表中的 modify_time 等字段进行...
限制说明
事务支持 云数据库 Memcache 版不支持事务，有事务性要求的数据不适合写入，而应该直接写入数据库。使用场景 当数据访问分布比较均匀，数据没有明显的冷热分别时，大量的访问请求在云数据库 Memcache 版无法命中，使用云数据库 Memcache 版...
数据归档OSS
该功能允许用户在控制台数据库管理页面或通过API将不经常访问的在线数据库转为冷存数据库，而冷数据会存储在低成本的对象存储OSS中，以此实现数据的冷热分离，帮助用户节约存储成本。功能简介 RDS SQL Server基于SQL Server内核原生的数据...
配置并管理实时同步任务
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。实时同步支持的数据源及其配置详情请参见 实时同步支持的数据源。说明 数据源...
HBase
df.show()数据展示 将数据写入到HBase%spark/定义DF val add_df=spark.createDataFrame(Seq(("NJ","Nanjing",15000000),("CQ","Chongqing",21000000))).toDF("state","city","population")/数据写入HBase add_df.write.mode("overwrite")....
接入数据库
在使用 数据安全中心DSC（Data Security Center）检测云产品（包括OSS、RDS、PolarDB等）中存在的敏感数据或审计数据库活动前，您需要先将数据库接入DSC。本文介绍如何将数据库接入DSC。背景信息 DSC 支持的数据库类型详情，请参见 支持的...
数据库高级特性管理
您可以在RDS管理控制台查看或修改数据库中的各类属性，也可以手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。前提条件 已创建数据库。创建方法，请参见 创建数据库。实例所在地域必须在：华东1（杭州）、...
使用流程
本文介绍如何创建和配置DBS备份计划、备份数据库以及恢复数据库，帮助您快速了解和上手数据库备份与管理操作。若您初次使用数据库备份DBS，请先了解 什么是数据库备份DBS。如需了解DBS是否支持备份恢复您的数据库，以及各类数据库备份恢复...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
产品概述
什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何人）接触...
Redis备份上云
数据库备份DBS支持备份自建数据库，并支持恢复到阿里云数据库，从而实现备份上云。本文以自建Redis备份上云为例，分3个部分介绍备份上云的完整操作步骤，即先将本地自建Redis数据备份至DBS中；再将DBS中的备份数据恢复至阿里云Redis；最后...
一键实时同步至AnalyticDB for MySQL 3.0
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
产品概述
什么是全密态数据库 全密态数据库是 达摩院数据库与存储实验室 与阿里云数据库团队合作的自研产品，以技术为基石，最小化人员、平台管理等不可控因素造成的潜在数据安全隐患，可以有效杜绝云数据库服务（或应用服务等数据拥有者以外的任何...
多租户管理使用说明
本文介绍了 PolarDB MySQL版 提供的租户管理简介以及使用说明等内容。简介 PolarDB MySQL版 提供的多租户...例如，在租户 t2 下，用户 u1 在 db3 数据库内执行的SQL语句被记录在审计日志中，数据库列将显示为 db3@t2，用户列将显示为 u1@t2。
Kafka集群的数据存储格式
数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化成便于存储或传输的格式。Shareplex Json：数据复制软件 Shareplex 读取源库中的数据，将数据写入至Kafka集群时...
Kafka集群的数据存储格式
数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化成便于存储或传输的格式。Shareplex Json：数据复制软件 Shareplex 读取源库中的数据，将数据写入至Kafka集群时...
功能概述
全密态数据库安全分级 从安全视角来看，云数据库能防护安全威胁，其安全性由弱到强可分为以下几个阶梯（阶梯越高，安全性越强）：常规云数据库服务：基于云安全服务，能够 拦截绝大部分外部攻击，但仍然需要信任数据库实例内的操作系统、...
使用DBS和DG备份本地或第三方云数据库
数据库备份DBS支持通过数据库网关DG（Database Gateway）备份本地IDC或第三方云厂商的私网数据库到云存储，您只需简单几步即可将数据库低成本地接入至阿里云。完成接入后，在配置DBS的逻辑备份时，您可以直接将数据库网关中接入的数据库...
创建数据源
说明 数据库系统的内置数据库是否自动同步到项目是通过系统配置项 odc.connect.database.sync.block-internal-database 确定。该配置项默认为 true，表示不会自动将内置的数据库转移到绑定的项目。ODC 识别的数据库系统内置数据库如下：...
表结构发布流程化
待审批完成后，系统会将变更的结构写入到product_database数据库中，您也可以将数据写入生产环境中（product_database数据库）。在结构设计工单页面中，单击 进入下一节点。在弹出的对话框中，再次单击 进入下一节点。整个流程结束，工单...
云数据库Redis实例间单向数据迁移
如果您需要将一个 云数据库 Redis 版 实例的数据迁移到另一个 云数据库 Redis 版 实例中，且您未创建新实例，推荐您通过 备份集克隆、数据闪回功能 将数据克隆至新实例，若您已创建新实例，建议您通过数据传输服务DTS（Data Transmission ...
ECS自建数据库的灾备与安全
数据库备份DBS支持MySQL、SQL Server、PostgreSQL等阿里云数据库，以及ECS上的自建数据库、线下数据库、其他云数据库进行备份恢复操作。本文以ECS MySQL为例，介绍如何通过DBS实现ECS数据库的灾备与安全，满足实时备份、快速恢复、异地灾备...
管理用户账号和数据库
单击>，将数据库添加到 已授权数据库 栏中。您可以设置该账号对各个数据库的权限，可设置为 读写（DML）、只读 或 所有者。说明 您可以设置该账号对各个数据库的权限，可设置为 读写（DML）、只读 或 所有者。密码 设置账号密码。要求如下...
恢复Oracle物理备份
选择原服务器的备份网关，并配置 数据库恢复目录 为数据库的原目录，若不填写，将默认为数据库的原目录。前提条件 已完成数据备份。具体操作，请参见 Oracle物理备份。准备一台服务器用于接收物理备份文件，并在服务器上安装备份网关。更多...
使用DTS迁移Redis
DTS可以在不中断数据库服务的同时，将数据全量或者增量迁移至 云数据库 Redis 版。该方案相比使用AOF方式迁移，具有更高的性能和安全性。功能概述 全量迁移 DTS将源库的存量数据全部迁移到目标库中，全量迁移不收费。增量迁移 在全量迁移的...
Db2 for LUW迁移至RDS MySQL
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
创建同步MaxCompute
创建MaxCompute表 DataHub支持将数据同步到MaxCompute对应的数据表中，同时支持分区表和非分区表，一般情况下推荐用户使用分区表进行数据同步以方便MaxCompute数据处理。目前DataHub支持将TUPLE和BLOB的数据同步到MaxCompute数据表中。1）...
全增量实时同步至Hologres
您需要在数据集成同步任务配置前，配置好您需要同步的源端和目标端数据库，以便在同步任务配置过程中，可通过选择数据源名称来控制同步任务的读取和写入数据库。同步任务支持的数据源及其配置详情请参见 支持的数据源及同步方案。说明 数据...
回收磁盘碎片以提升磁盘利用率
在删除云数据库MongoDB实例的数据后，这些被删除数据使用的存储空间会被标记为空闲，随后写入的新数据可能会被直接存储到这部分空闲的存储空间中，也可能会先扩展文件的存储空间再存储到文件末尾。上述情况将导致一部分空闲的存储空间不会...
自建数据库异地备份
本文介绍如何使用 数据库备份DBS 创建自建数据库的异地备份任务，实现异地容灾需求。本示例将位于杭州的自建MySQL数据库备份至华北2（北京）。本文也适用于其他数据库类型的自建库，例如自建Oracle、SQL Server数据库等，关于其他备份参数...
创建反向实例
背景信息 DTS支持为正常运行的同步实例一键创建反向增量同步实例，在业务写入数据库由原同步实例的源库切换为目标库时，帮助您将数据库切换后的增量业务数据同步至原业务写入数据库，常应用于数据库容灾场景下的数据回传。前提条件 原实例...
快速入门
描述 Topic的描述信息 步骤三：写入数据 DataHub支持多种写入方式，针对日志可以选择Flume等多种插件，针对数据库可以选择DTS、canal，也可以通过SDK写入，在这里使用console工具上传文件的方式写入数据。下载并解压console工具包，配置ak...
PolarDB MySQL版同步至RDS MySQL
若您将列名仅大小写不同的字段写入到目标MySQL数据库的同一个表中，可能会因为MySQL数据库列名大小写不敏感，导致同步结果不符合预期。在数据同步完成后，建议使用 analyze table<表名>命令检查数据是否已写入目标表。例如，在MySQL触发HA...
Db2 for LUW同步至RDS MySQL
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
- 产品推荐
- 这些文档可能帮助您