查看全量迁移链路状态和性能
DTS到目标库的链路 BPS：DTS每秒写入到目标库的数据量，单位为MB/s。RPS：DTS每秒写入到目标库的行数。网络延迟：DTS与目标库间的网络延迟。写RT：DTS写入到目标库的响应时间。全量迁移性能 可查看全量迁移流量、源和目标实例的RPS、读写...
mysqldump
当您需要备份或者迁移 云数据库SelectDB 中的数据时，通过mysqldump工具，可以将数据库的...使用mysqldump导出数据和表结构仅用于开发测试或者数据量很小的情况，请勿用于大数据量的生产环境。相关文档 mysqldump的详细信息请参见 mysqldump。
表设计最佳实践
例如，每隔5分钟执行1次同步，每次同步的数据量为10条，一天内的增量为10000条，则会产生1000个小文件。此种场景下，需要在数据同步完成后合并全量极限表和增量数据表。源数据采集客户端太多时，如果源数据通过Tunnel直接进入到一个分区，...
冷热分层
背景信息 在海量大数据场景下，随着业务和数据量的不断增长，性能和成本的权衡成为大数据系统设计面临的关键挑战。Delta Lake是新型数据湖方案，推出了数据流入、数据组织管理、数据查询和数据流出等特性，同时提供了数据的ACID和CRUD操作...
计费常见问题
存储在MaxCompute的数据，例如表（Table）、资源（Resource），会占用存储空间，产生存储费用，MaxCompute会按照其数据量的大小计算费用，计费周期为天。更多存储计费信息，请参见 存储费用。删除MaxCompute项目中的几张大表后，显示的存储...
导入
2 在该区域，您可查看导入任务的状态、成功导入的数据量、本次导入任务导入的数据总量等信息，单击 查看详情 即可查看目标任务的详细内容。重点关注：导入状态：成功：表示该任务中所有对象均导入成功。失败：表示该任务中所有对象均导入...
Dataphin管道任务将MongoDB数据同步到MaxCompute发现...
问题描述 Dataphin中通过管道任务将MongoDB中的数据同步到MaxCompute，发现有重复数据。...解决方案 重刷mongo的数据，不能覆盖_id字段 保持mongo数据不变，设置管道任务并发度为1 适用于 适用产品：Dataphin 适用版本：3.7及其以上版本
ODS层设计规范
本文为您介绍ODS层设计规范。数据同步及处理规范 数据同步方式的选择 基本规范通过需求形式落地到DataWorks的数据集成，规范落地情况依赖...建议对ODS表的数据量及数据记录数设置周同环比监控，如果周同环比无变化，表示源系统已迁移或下线。
混合存储型（已停售）
在保证常用数据访问性能不下降的基础上，混合存储型能够大幅度降低用户成本，实现性能与成本的平衡，同时使单个Redis实例的数据量不再受内存大小的限制。内存数据：内存中存放了热数据的Key和Value，同时为快速确认要操作的Key是否存在，...
生成测试数据
模拟生成数据量 指定需要生成的数据量。默认值：1000 条数据，最多生成不超过 100W 行数据，所以用户可以在文本框中输入 1\~1000000 间的任意正整数。批处理大小 指定每生成多少条数据进行一次提交（COMMIT 命令）操作。默认每生成 200 条...
敏感数据访问及导出情况
数据访问页面为您展示基于配置规则识别出的敏感数据的访问量、访问趋势、导出量和导出明细等，帮助您掌控每一次访问敏感数据的情况。该页面E-MapReduce计算...包括查询时间段内的数据导出的总量、每天导出的数据量和数据导出总量的前五名。
SQL窗口-MongoDB数据库
分片命令规范 对Mongo分片命令进行约束。说明 功能模块的检测点中内置了大量的配置项，您可以根据实际需求调整默认配置或增加新规则。具体操作，请参见 配置安全规则。检测点工作流程图：因子和动作 因子：系统内置变量，可用来获取安全...
使用MongoDB工具将自建数据库迁移至分片集群实例
说明 您可以在迁移前，在目标MongoDB实例中建立需要数据分片的数据库和集合，配置数据分片。也可以在迁移后配置数据分片。步骤三：将数据迁移至阿里云 获取任一Mongos节点的公网或内网连接地址，详情请参见 分片集群实例连接说明。说明 ...
功能特性
功能集 功能 功能描述 参考文档 资源计费 读流量 按照实际传输的数据量计费 产品定价 存储容量 按照实际的存储量计费 产品定价 公网流量 使用阿里云公网进行的网络传输数据流量 产品定价 活跃shard租用 Shard租用只统计当前状态为活跃...
分区热力图
库表视图 图 2.DN视图 左侧直方图：各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区，DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区，其中表示DN节点和逻辑分区的矩形，通过长度表示拥有数据量的多少，长度越长表示数据量越多。...
数据质量评估标准
例如，某个稳定业务的数据量每天约为100万条记录，某天突然下降了1万条，则可能是出现了记录缺失；某科高考成绩表中，每个考卷分数都对应一个准考证号，当准考证号字段的空值数大于0时，则可能是出现了信息缺失。准确性 准确性是指数据中...
分区热力图
库表视图 图 2.DN视图 左侧直方图：各个矩形分别代表当前实例下的逻辑库、逻辑表、逻辑分区，DN视图下代表存储节点、逻辑库、逻辑表、逻辑分区，其中表示DN节点和逻辑分区的矩形，通过长度表示拥有数据量的多少，长度越长表示数据量越多。...
东软案例
企业面向客户、合作伙伴和内部员工建设IT系统及应用复杂度和数量会随着产品智能、互联化的深入持续增长，对映可用性保障运维监控采集数据采集种类，以及需要存储的数据量同步激增，现有监控系统基于RRD数据库或关系数据库搭建的单模引擎的...
恢复数据库
说明 部分数据库支持单表或单库恢复粒度，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。具体支持的恢复粒度，请参见 支持的数据库引擎与功能。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 ...
向量检索版介绍
表之间共享数据节点资源（CPU、内存、磁盘）：上图中展示的就是两张向量表，一个是4分片，一个是1分片，4分片的会根据产出的索引进行均分数据到每个分片中，而1分片的向量表则会形成广播表在每个数据节点中存储一份完整的向量表2的索引数据...
使用数据传输迁移数据
如果开启，请设置 RPS（全量迁移阶段每秒最多可以迁移至目标端的数据行数的最大值限制）和 BPS（全量迁移阶段每秒最多可以迁移至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量迁移实际可以达到的...
备份恢复性能说明
规格与压缩格式 压缩后的数据量 耗时 恢复速度（相对于原始数据量）small（4线程）gzip 21.1 GB 320s 126 MB/s large（8线程）gzip 21.1 GB 161s 250 MB/s xlarge（16线程）gzip 21.1 GB 86s 468 MB/s small（4线程）lz4 31.1 GB 408s 99 ...
全增量数据同步
客户自建的目标表可能会和源表分区很不一致，这可能会导致迁移完成之后，目标表会进行频繁的split、compaction，如果表的数据量十分庞大，可能会导致这个过程非常耗时。如果源表带有coprocessor,在创建目标表的时候需要确保目标集群包含...
验证分析型查询请求能力
OceanBase 数据库采用了分布式架构，将数据分片存储在不同的节点上，通过数据分片和任务分片实现了数据和计算的并行处理。在OceanBase 中，每个节点都可以独立地执行任务，并且可以通过高速的网络互相通信，实现数据的交互和同步。PARALLEL...
离线同步写入MongoDB数据
DataWorks的数据集成为您提供MongoDB Writer插件，可从其他数据源中读取数据，并将数据同步至MongoDB。本文以一个具体的示例，为您演示如何通过数据集成将MaxCompute的数据离线同步至MongoDB。前提条件 本实践进行操作时，需满足以下条件。...
调整迁移速率
数据传输服务DTS（Data Transmission Service）的同步和迁移实例在进行数据传输的过程中，您可以根据源和目标库的...可能是源库有其他业务，或者待同步、迁移的数据量较大。如何关闭限速？参考 操作步骤，将 是否限制全量迁移速率 选择为 否。
数据上传
本地文件：支持 CSV、XLSX 格式，CSV 文件最大支持上传数据的数据量为5GB，XLSX 文件最大支持上传的数据量为100MB。默认上传文件的第一个Sheet。如需上传某个文件的多个Sheet数据，则需将每个Sheet创建一个表格且作为表格的首个Sheet。阿里...
Oracle永久增量备份
通过增量合成备份达到完整全量备份的效果，同时有如下优势：降低备份成本：减少备份的数据量、存储的数据量、备份数据传输的网络带宽。降低资源开销：相比完整全量备份，增量合成备份只需要更少的源库磁盘IOPS。支持挂载：通过挂载可实现秒...
恢复Redis数据库
说明 部分数据库支持单表或单库恢复粒度，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。具体支持的恢复粒度，请参见 支持的数据库引擎与功能。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 ...
恢复PolarDB MySQL版数据库
说明 部分数据库支持单表或单库恢复粒度，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。具体支持的恢复粒度，请参见 支持的数据库引擎与功能。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 ...
监控告警
云数据库 SelectDB 版 提供了丰富的性能监控数据，方便您查看...源端存储读吞吐量 单位时间内读取远端存储的数据量。Byte/s 缓存读吞吐量 集群各节点硬盘每秒的 读取吞吐速率。Byte/s 缓存写吞吐量 集群各节点硬盘每秒的 写入吞吐速率。Byte/s
恢复SQL Server逻辑备份
说明 部分数据库支持单表或单库恢复粒度，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。具体支持的恢复粒度，请参见 支持的数据库引擎与功能。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 ...
功能特性
RDS MySQL高频备份 MongoDB高频备份 极速库表恢复 指定部分库表的快速恢复，在相同的数据量下，极速库表恢复相较常规库表恢复提升了约50%~95%的恢复速度。RDS MySQL极速库表恢复 RDS PostgreSQL极速库表恢复 存储能力 热温冷备份集分级转储...
PolarDB MySQL版逻辑备份
备份目标信息 备份目标存储类型 存放备份数据的存储类型，支持的选项：DBS内置存储（推荐）：无需创建存储空间，数据将自动存入DBS内置存储中，会根据存入DBS的数据量产生费用，计费方式请参见 存储费用。用户OSS：您需要提前在OSS中创建...
迁移 TiDB 数据库的数据至 OceanBase 数据库 MySQL ...
如果开启，请设置 RPS（全量迁移阶段每秒最多可以迁移至目标端的数据行数的最大值限制）和 BPS（全量迁移阶段每秒最多可以迁移至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量迁移实际可以达到的...
SQL Server逻辑备份
备份目标信息 备份目标存储类型 存放备份数据的存储类型，支持的选项：DBS内置存储（推荐）：无需创建存储空间，数据将自动存入DBS内置存储中，会根据存入DBS的数据量产生费用，计费方式请参见 存储费用。用户OSS：您需要提前在OSS中创建...
恢复PostgreSQL数据库
说明 支持恢复单表或单库，减少恢复的数据量，缩短恢复时间RTO（Recovery Time Objective）。在 预检查 对话框中显示 预检查通过 后，单击 立即启动。您可以在左侧的 恢复任务 页签中，查看数据库恢复进度。说明 恢复时间取决于备份计划...
MongoDB逻辑备份
备份目标信息 备份目标存储类型 备份目标存储类型，支持：DBS内置存储（推荐）：无需创建存储空间，数据将自动存入DBS内置存储中，会根据存入DBS的数据量产生费用，计费方式请参见 存储费用。用户OSS：您需要提前在OSS中创建存储空间...
OceanBase 数据库之间的数据迁移
如果开启，请设置 RPS（全量迁移阶段每秒最多可以迁移至目标端的数据行数的最大值限制）和 BPS（全量迁移阶段每秒最多可以迁移至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量迁移实际可以达到的...
迁移 PolarDB-X 2.0 数据库的数据至 OceanBase 数据库...
如果开启，请设置 RPS（全量迁移阶段每秒最多可以迁移至目标端的数据行数的最大值限制）和 BPS（全量迁移阶段每秒最多可以迁移至目标端的数据量的最大值限制）。说明 此处设置的 RPS 和 BPS 仅作为限速限流能力，全量迁移实际可以达到的...
- 产品推荐
- 这些文档可能帮助您