使用独立的Trino集群
Hive的部分表在创建时，会默认指定路径，因此在查询保存在数据集群上的数据时，为了查询时能够读取到这些表，Trino集群的每一台主机都需要配置host。方式一（推荐）：您可以在EMR控制台，通过添加集群脚本或引导操作，来实现配置host，详情...
我是DBA
操作日志 操作日志中保存了数据变更记录，您可以随时在其中追溯变更时间、变更人、执行的操作等信息。敏感数据管理 在敏感数据管理中，可以对表中的敏感数据进行添加算法、调整安全级别等操作。数据水印 可在文件中嵌入水印或将文件的水印...
我是管理员
操作日志 操作日志中保存了数据变更记录，您可以随时在其中追溯变更时间、变更人、执行的操作等信息。访问IP白名单 设置IP白名单可以隔离目标IP以外的所有访问，有效提高数据库安全性。敏感数据管理 在敏感数据管理中，可以对表中的敏感...
同步时源库为Db2 for LUW的注意事项及限制
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
将Excel的数据导入数据库
您可以将Excel的数据通过数据管理服务DMS（Data Management Service）导入到RDS MySQL数据库中。操作步骤 将Excel文件另存为.csv格式，并将中文或不符合数据库要求的列名修改为英文。说明 如果您的数据没有唯一的ID列，建议在最前方添加一...
设置数据保留策略
InfluxDB的数据保留策略可以定义数据在InfluxDB中保存时间，本文介绍如何设置数据保留策略。前提条件 已创建数据库。具体操作，请参见 创建数据库。数据保留策略介绍 InfluxDB可以通过定义数据保留策略，用来控制存储数据量的方式。新创建...
功能发布记录（2023年）
2023-12 功能名称 功能描述 发布时间 发布地域 使用客户 相关文档 数据开发（DataStudio）绑定数据源 若您要在DataWorks中进行数据建模、数据开发或使用运维中心周期性调度任务，需先将已创建的数据源或集群绑定至数据开发（DataStudio）...
连续查询
在时序应用的场景下，对于依照时间顺序写入的实时数据，用户有时会希望每隔一段固定时间，就能够按照一定的查询条件对该时间范围内的时序数据进行一次计算（例如：对该时间范围内的数据进行一次聚合计算），并将计算结果另行保存下来。...
添加数据集
在 保存数据集 页面内，您可以自定义输入当前数据集的名称。说明 数据集名称是必填项，务必填写完成后再进行下一步操作。在下方描述框内，自定义输入当前数据集的描述内容及备注说明，描述部分内容非必填项。数据集名称和描述编辑完成后，...
SQL查询
工作空间已配置数据源：DataWorks的数据源分为引擎绑定时默认创建的引擎数据源和在数据源配置界面创建的自建数据源，若要操作非引擎数据源，请确保已创建数据源，详情请参见 创建并管理数据源。已拥有某数据源在数据分析模块的查询权限：...
迁移时源库为DB2 for LUW的注意事项及限制
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
数据连接管理
数据传输服务DTS（Data Transmission Service）支持录入数据库信息。在配置任务时，您可以直接选择已录入的数据库，DTS将自动填入数据库信息而无需您手动输入，避免了重复输入数据库信息的繁琐步骤。本文介绍如何录入、保存、编辑或删除...
同步时源库为SQL Server的注意事项及限制
如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
Quick BI连接MaxCompute
MaxCompute支持您将MaxCompute项目数据接入阿里云Quick BI，对海量数据进行实时在线分析服务，同时支持拖拽式操作和丰富的可视化效果，帮助您轻松自如地完成数据分析、业务数据探查、报表制作等工作。本文为您介绍如何使用Quick BI连接...
迁移时源库为SQL Server的注意事项及限制
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
校验迁移后的Redis数据
在Redis迁移完成后，您可以通过redis-full-check工具检查数据的一致性。前提条件 已完成Redis迁移。已创建用于运行redis-full-check的ECS实例，且ECS实例的系统为Linux，创建方法请参见 创建ECS实例。ECS实例可以访问迁移源端和目的端Redis...
集群容灾能力
数据容灾 在Hadoop分布式文件系统（HDFS）中，每一个文件的数据均是分块存储的，每一个数据块保存有多个副本（默认为3），并且尽量保证这些数据块副本分布在不同的机架之上。一般情况下，HDFS的副本系数是3，存放策略是将一个副本存放在...
概述
每次保存时，一级备份并没有真正复制数据，当数据块有修改时系统会将其中一个历史版本的数据块保留给快照，同时生成新的数据块被原数据引用（Redirect）。因此无论数据库容量多少，都可以做到秒级备份。PolarDB 集群备份和恢复功能均采用多...
表设计规范
表数据存储规范 按数据层规划数据的生命周期：源表ODS层：每天从业务系统同步过来的数据，全部保留，生命周期定义永久保存。当下游数据受损时，可以从ODS恢复数据。若ODS每天同步过来的是全量表，则可以通过全表拉链的方式来压缩存储。数据...
X-Engine最佳实践
淘宝和天猫交易订单信息库 淘宝和天猫存储用户交易数据的数据库，需要保存用户所有的历史交易记录以供查询，当前交易记录数据库集群现状如下：数据条目超过万亿级，磁盘容量达到PB级。在大促时面临极大的写入压力。虽然可以通过水平拆库，...
自建数据库异地备份
本文介绍如何使用 数据库备份DBS 创建自建数据库的异地备份任务，实现异地容灾需求。本示例将位于杭州的自建MySQL数据库备份至华北2（北京）。本文也适用于其他数据库类型的自建库，例如自建Oracle、SQL Server数据库等，关于其他备份参数...
从备库备份MongoDB数据库
有公网IP:Port的自建数据库 通过专线/VPN网关/智能网关接入的自建数据库 无公网IP:Port的自建数据库(通过数据库网关DG接入)操作步骤 本示例的源库部署位置为 通过专线/VPN网关/智能网关接入的自建数据库。登录 DBS控制台。单击左侧导航栏中...
SQL Server物理备份
数据库备份DBS提供全量备份、增量备份和数据恢复能力，本文介绍配置SQL Server物理备份的操作步骤。前提条件 数据库的版本为：SQL Server 2019、2017、2016、2014、2012、2008R2、2005、2000。说明 仅支持本地自建数据库和云服务器上的自建...
Redis逻辑备份
无公网IP:Port的自建数据库(通过数据库网关DG接入)：可通过数据库网关备份自建数据库，您需要提前为数据库实例配置数据库网关，并在此配置步骤选择目标 网关DG实例ID，配置方法请参见 通过数据库网关DG备份本地或第三方云的私网数据库到云...
MongoDB逻辑备份
数据库所在位置 需要备份的数据库所在位置，支持类型如下：有公网IP:Port的自建数据库 ECS上的自建数据库 云数据库MongoDB 通过专线/VPN网关/智能网关接入的自建数据库 无公网IP:Port的自建数据库（通过数据库网关DG接入）说明 当您选择云...
PolarDB MySQL版逻辑备份
数据库备份DBS 可满足 PolarDB MySQL版 数据库的单表恢复、异地备份、长期归档等需求。本文介绍如何使用DBS实现 PolarDB MySQL版 数据库的自动备份。注意事项 如需进行增量备份，请确保 PolarDB MySQL版 已开启Binlog（默认未开启）。更多...
准备数据
上传原始数据至RDS数据源，详情请参见 将Excel的数据导入数据库。新增数据源 说明 本次实验需要创建MySQL数据源。进入管理中心页面。登录 DataWorks控制台，切换至目标地域后，单击左侧导航栏的 管理中心，在下拉框中选择对应工作空间后...
通过公网地址实现数据库跨账号备份
若您在上一步开启了 增量备份 功能，您还需要配置增量备份数据的保存时间，关于备份数据生命周期的更多信息，请参见 如何管理生命周期。完成上述配置后，单击页面右下角的 预检查并启动。预检查 对话框中显示预检查通过后，单击 立即启动。...
MySQL物理备份
数据库备份DBS 支持对MySQL数据库的物理文件进行全量备份、增量备份、Binlog日志文件备份。本文向您介绍如何通过配置MySQL物理备份计划，实现全量备份和增量备份，以满足数据灾难恢复、数据迁移等需求。前提条件 数据库为 Linux系统 的自建...
Oracle物理备份
数据库备份DBS 支持对Windows或Linux操作系统上的Oracle数据库进行物理备份，支持备份Oracle单实例、Data Guard Physical Standby、RAC等多种架构的Oracle数据库。本文介绍Oracle物理备份，关于Oracle逻辑备份的信息，请参见 Oracle逻辑...
创建数据库并写入数据
在进行数据写入和查询前，您需要先创建数据库。本文介绍如何为 云数据库 SelectDB 版 实例创建 数据库并写入数据。前提条件 已通过 MySQL协议连接 云数据库 SelectDB 版 实例。具体操作，请参见 连接实例。注意事项 每个 云数据库 SelectDB...
Db2 for LUW迁移至RDS MySQL
如为增量迁移任务，DTS要求源数据库的数据日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量迁移完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志而导致...
查询备份数据
查询备份与恢复备份的区别 区别项 查询备份数据 恢复备份 功能原理 按需找到目标历史备份时间点的备份数据集，将备份数据集保存至临时实例中，可通过DMS控制台在临时实例的SQL窗口中对历史数据进行查询。通过数据备份和日志备份进行恢复，...
查询备份数据
查询备份与恢复备份的区别 区别项 查询备份数据 恢复备份 功能原理 按需找到目标历史备份时间点的备份数据集，将备份数据集保存至临时实例中，可通过DMS控制台在临时实例的SQL窗口中对历史数据进行查询。通过数据备份和日志备份进行恢复，...
如何备份RDS只读实例
本文以RDS MySQL只读实例为例，介绍如何使用 数据库备份DBS 备份RDS只读实例。前提条件 已购买DBS备份计划。购买方法，请参见 创建备份计划。说明 购买时，选择数据库类型为 MySQL，并选择备份方式为 逻辑备份。已创建RDS MySQL只读实例。...
Db2 for LUW同步至RDS MySQL
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
CREATE DATABASE
CREATE DATABASE语法用于在Lindorm实例中创建数据库，并设置数据库属性，例如数据有效期TTL，方便您统一归档数据。引擎与版本 CREATE DATABASE语法适用于宽表引擎和时序引擎。宽表引擎仅2.2.16及以上版本支持CREATE DATABASE语法。时序引擎...
RDS MySQL只读实例逻辑备份
本文介绍如何使用 数据库备份DBS 备份RDS MySQL只读实例。前提条件 已购买DBS备份计划。购买方法，请参见 创建备份计划。说明 购买时，选择数据库类型为 MySQL，并选择备份方式为 逻辑备份。已创建RDS MySQL只读实例。创建方法，请参见 ...
Db2 for LUW同步至云原生数据仓库 AnalyticDB ...
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
RDS MySQL或自建MySQL逻辑备份
数据库备份DBS 可满足MySQL数据库的异地备份、长期归档、单表恢复等需求。本文介绍如何使用DBS实现 RDS MySQL 或自建MySQL数据库的自动备份。功能概述 功能 说明 增量备份 支持增量备份，采用增量日志流技术，实时获取Binlog进行增量备份。...
- 产品推荐
- 这些文档可能帮助您