功能简介
同时，随着数据量剧增，在海量数据中快速发现高质量的洞察报告，需要花费大量时间进行数据分析，从而才有可能提取有效知识。为了将业务人员从重复、无效的分析工作释放出来，并通过智能化的能力帮助业务管理者、运营、业务分析师等人员高效...
数据校验计费方式
按抽样比例进行HASH校验 的校验模式计费标准与源数据库实例的地域、目标数据库实例的地域、校验的数据量（含单次校验的数据量和校验的次数）等因素有关，详情请参见下表。重要 实际费用请以购买页面和账单为准。数据迁移实例中的全量校验...
ListDoctorHiveTables-批量获取Hive表分析结果
Day growth count of empty files HotDataDayGrowthSize object 热数据的数据量日增量大小。热数据指的是 7 日内有访问的数据。Name string 指标名称。hotDataDayGrowthSize Value long 指标值。203431 Unit string 指标单位。MB ...
资产全景
在 全局 页面，右下角会展示各个业务板块的名称、数据量、占总数据量比，以及系统内的 总数据表数、总项目数。总数据量：分布式数据存储可能有多个副本（取决于计算引擎本身配置），当前展示的存储量为所有副本存储总量。机器学习PAI模型...
数据变更最佳实践
建议如下：通过每条INSERT或者REPLACE语句写入的数据行数大于1000行，但写入的总数据量不宜太大，不超过16MB。通过批量打包方式写入数据时，单个批次的写入延迟相对会高一些。写入报错时，需要做重试确保数据被写入，重试导致的数据重复...
配置跨库Spark SQL节点
在线业务会产生大量的数据，当需要对这些数据进行加工分析时，一般需要将在线业务的数据同步到专门用于数据加工和分析的数据仓库，再进行数据分析。数据仓库的数据回流到在线库，用于数据查询。在数据仓库中对数据进行加工分析后，往往需要...
聚合支付方案
分析型需求 随着数据量的增大，数据查询涉及的量级呈指数级上升，针对商户等大数据量场景的分析查询，单体MySQL已无法满足需求。解决方案 阿里云通过多款云数据库产品为利楚扫呗制定以下解决方案：方案解读：使用DRDS分库分表将数据库进行...
概述
DataHub支持云产品 注意：使用MaxCompute当batch数据量达到64M或者5min同步一次 使用TableStore/OSS/ElasticSearch/函数计算/Hologres当batch数据量达到4M或 者20s会同步一次 同步MySQL/RDS/ADS3.0 当batch数据量达到512kb或者20s会进行...
资产全景
在 全局 页面，右下角会展示各个业务板块的名称、数据量、占总数据量比，以及系统内的 总数据表数、总项目数。总数据量：分布式数据存储可能有多个副本（取决于计算引擎本身配置），当前展示的存储量为所有副本存储总量。仅统计生产项目...
从自建Redis迁移至阿里云Redis
若源数据库数据量比较大，可以适当增大 repl-timeout 参数的值。注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的资源，可能会导致数据库服务器负载上升。如果数据库业务量较大或服务器规格较低，可能会加重数据库压力，甚至导致...
使用DTS将MongoDB Atlas数据库迁移至阿里云
您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 全量迁移 时才可以配置。是否限制增量迁移...
使用DTS将MongoDB Atlas数据库迁移至阿里云
您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 全量迁移 时才可以配置。是否限制增量迁移...
配置DataHub输出组件
一次提交的数据量 为提高写出效率，数据集成会积累Buffer数据，待积累的数据大小达到一次提交的数据量大小（单位MB）时，批量提交到目的端。默认是1，即1 MB数据。高级配置 按需进行配置。支持以下参数：maxRetryCount：任务失败的最多重试...
创建数据访问代理数据表
对于设置为“分库分表”模式的数据访问代理数据库来说，在创建数据表时需要制定其相应的分表规则，之后应用通过连接数据访问代理可以透明访问后端的数据表，由数据访问代理根据设定的分表规则进行路由操作。操作步骤 在数据访问代理控制台...
PolarDB PostgreSQL版（兼容Oracle）集群间的数据迁移
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
配置DataHub输出组件
一次提交的数据量 为提高写出效率，数据集成会积累Buffer数据，待积累的数据大小达到一次提交的数据量大小（单位MB）时，批量提交到目的端。默认是1，即1 MB数据。高级配置 按需进行配置。支持以下参数：maxRetryCount：任务失败的最多重试...
云监控控制台查看监控
每秒插入数据量 各节点每秒写入的大小。单位：MB。每秒插入行数 各节点每秒写入的行数。内存使用比例 集群各节点的内存使用量与最多可使用内存容量的比值。内存使用量 集群各节点的内存使用量。单位：MB。每秒查询次数 每秒处理的查询次数...
使用DTS将腾讯云MongoDB增量迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
使用DTS将腾讯云MongoDB增量迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
从Amazon RDS MySQL迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission ...您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 ...
从Amazon RDS MySQL迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission ...您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 ...
从腾讯云MySQL迁移至阿里云
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
从Amazon Aurora MySQL迁移至PolarDB MySQL版
是否限制增量迁移速率 您也可以根据实际情况，选择是否对增量迁移任务进行限速设置（设置 每秒增量迁移的行数RPS 和 每秒增量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 增量迁移 时才可以配置。配置ETL功能 选择...
ODS层设计规范
日志（数据量非常大，例如一天数据量大于100 GB）数据保留24个月。自主设置是否保留历史月初数据。自主设置是否保留特殊日期数据。ODS镜像型全量表 按天分区 重要的业务表及需要保留历史的表视情况保存。ODS全量表的默认生命周期为2天，...
从Amazon Aurora MySQL迁移至PolarDB MySQL版
您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量MB），以缓解目标库的压力。说明 仅当 迁移类型 选择了 全量迁移 时才可以配置。是否限制增量迁移...
从RDS PPAS迁移至PolarDB PostgreSQL版（兼容Oracle）...
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从Amazon Aurora MySQL迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data ...您可以根据实际情况，选择是否对全量迁移任务进行限速设置（设置 每秒查询源库的速率QPS、每秒全量迁移的行数RPS 和 每秒全量迁移的数据量(MB)BPS），以缓解目标库的压力。说明 仅当 迁移类型 ...
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
迁移MongoDB实例至其他地域
本文介绍如何使用数据传输服务DTS（Data Transmission Service），实现全量数据迁移和增量数据迁移MongoDB副本集实例至其他地域，全量数据迁移MongoDB单节点实例至其他地域。前提条件 源实例类型为单节点实例或副本集实例。如果源实例为分...
备份集查询功能概览
数据库备份服务DBS提供了云上备份数据查询功能，您只需要简单的SQL语句，即可查询到您的备份数据，且备份数据不会被修改，该功能只针对查询所涉及的数据量收费，成本低。同时，DBS还提供查询多个备份集的功能，您可以更好地分析历史备份...
从Amazon RDS Oracle迁移至阿里云RDS MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从RDS MariaDB迁移至RDS MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从RDS MariaDB迁移至RDS MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
使用DTS迁移副本集架构的自建MongoDB数据库上云
配置 说明 迁移类型 如果只需要进行全量迁移，则勾选 全量数据迁移。如果需要进行不停机迁移，则同时勾选 全量数据迁移 和 增量数据迁移。说明 如果未勾选 增量数据迁移，为保障数据一致性，数据迁移期间请勿在自建MongoDB数据库中写入新的...
使用DTS迁移副本集架构的自建MongoDB数据库上云
配置 说明 迁移类型 如果只需要进行全量迁移，则勾选 全量数据迁移。如果需要进行不停机迁移，则同时勾选 全量数据迁移 和 增量数据迁移。说明 如果未勾选 增量数据迁移，为保障数据一致性，数据迁移期间请勿在自建MongoDB数据库中写入新的...
从RDS MySQL迁移至PolarDB MySQL版
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从MongoDB副本集实例迁移至分片集群实例
如果需要进行不停机迁移，则同时选中 全量数据迁移 和 增量数据迁移。说明 如果未选中 增量数据迁移，为保障数据一致性，数据迁移期间请勿在源MongoDB数据库中写入新的数据。迁移对象 选择迁移对象，方法如下：从 迁移对象 列表中，选择待...
从RDS MySQL迁移至自建MySQL
注意事项 DTS在执行全量数据迁移时将占用源库和目标库一定的读写资源，可能会导致数据库的负载上升，在数据库性能较差、规格较低或业务量较大的情况下（例如源库有大量慢SQL、存在无主键表或目标库存在死锁等），可能会加重数据库压力，...
从MongoDB副本集实例迁移至分片集群实例
配置 说明 迁移类型 如果只需要进行全量迁移，则选中 全量数据迁移。如果需要进行不停机迁移，则同时选中 全量数据迁移 和 增量数据迁移。说明 如果未选中 增量数据迁移，为保障数据一致性，数据迁移期间请勿在源MongoDB数据库中写入新的...
查看与减少数据备份
说明 如果当月全量备份数据量与增量备份数据量之和未超过每月备份数据量免费额度，则不额外收取备份费用，否则超出部分按量付费。更多信息，请参见 备份费用。如果使用了DBS内置存储，还将收取存储费用，更多信息，请参见 存储费用。备份...
- 产品推荐
- 这些文档可能帮助您