应用场景
OceanBase 数据库可以利用分区表特性将数据打散后分布到集群的多个节点上，从而满足一部分的查询需求，之后利用强一致性全局索引功能来满足其它维度的查询和分析需求，在数据库层面实现了数据分片和水平扩展能力，并且对用户透明。...
执行补数据并查看补数据实例（新版）
补数据可通过补历史或未来一段时间的数据，将写入数据至对应时间分区。代码中的 调度参数，将根据补数据选择的业务时间自动替换为具体值，并结合业务代码将对应时间数据写入指定分区。具体写入的分区与执行的代码逻辑，与任务定义的代码...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
操作指南
一、大数据专家服务流程指南 二、服务流程说明 用户可以根据自己实际需要，提前或者在问题发生时购买大数据专家服务，服务项包含大数据技术架构方案咨询、大数据解决方案POC、大数据搬站迁云方案咨询、跨地域迁移支持服务、大数据专家高阶...
X-Engine最佳实践
虽然可以通过水平拆库，实现性能的和存储能力的水平扩展，但是由于体量巨大，在单实例存储的数据容量无法提高的前提下，拆库导致数据库集群规模过大，会导致运维和管控操作日益复杂，同时整体存储成本的日益上涨也是一个无法忽视的问题。...
功能特性
配置管理 数据保护 敏感数据管理 DMS的敏感数据保护能力能根据所选的敏感数据扫描模板、敏感数据识别模型以及脱敏算法对数据进行脱敏处理，以避免敏感数据滥用，有效保护企业的敏感数据资产，防止数据泄露造成企业经营资金损失或罚款。...
自建数据库MongoDB版（分片集群架构）迁移至云数据库...
u dtstest-p 'Test123456' cleanupOrphaned.js 根据业务需要，在目标MongoDB实例中创建需要分片的数据库和集合，并配置数据分片，详情请参见 设置数据分片以充分利用Shard性能。说明 在配置数据迁移前配置数据分片，可避免数据被迁移至同一...
自建数据库MongoDB版（分片集群架构）迁移至云数据库...
u dtstest-p 'Test123456' cleanupOrphaned.js 根据业务需要，在目标MongoDB实例中创建需要分片的数据库和集合，并配置数据分片，详情请参见 设置数据分片以充分利用Shard性能。说明 在配置数据迁移前配置数据分片，可避免数据被迁移至同一...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
MongoDB（无分片键）同步至MongoDB（分片集群架构）
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
MongoDB（无分片键）迁移至MongoDB（分片集群架构）
根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片集群架构的MongoDB数据分布不均衡。说明 配置数据分...
云数据库MongoDB版（分片集群架构）间的双向同步
您需要根据业务需求，在源和目标 云数据库MongoDB版 实例中创建需要分片的数据库和集合、配置数据分片、开启Balancer（源 云数据库MongoDB版 实例必须在增量同步期间开启Balancer）并进行预分片。更多信息，请参见 设置数据分片以充分利用...
云数据库MongoDB版（分片集群架构）间的双向同步
您需要根据业务需求，在源和目标 云数据库MongoDB版 实例中创建需要分片的数据库和集合、配置数据分片、开启Balancer（源 云数据库MongoDB版 实例必须在增量同步期间开启Balancer）并进行预分片。更多信息，请参见 设置数据分片以充分利用...
排查Redis实例内存使用率高的问题
在 Redis 集群架构中，拆分大Key能对数据分片间的内存平衡起到显著作用。检查是否使用了Hash Tag 如果使用了Hash Tag，请根据业务实际情况，评估将一个Hash Tag拆分为多个Hash Tag，使数据更加均匀地分布在不同的数据分片节点上。扩容实例...
云数据库MongoDB版（副本集架构）...或分片集群架构）
如果目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（副本集架构）...或分片集群架构）
如果目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（单节点架构）全量迁移至云数据库...
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（副本集架构）...或分片集群架构）
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（副本集架构）...或分片集群架构）
如目标 云数据库MongoDB版 为分片集群架构，您需要根据业务需要，在目标 云数据库MongoDB版 中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何处理分片...
云数据库MongoDB版（分片集群架构）同步至云数据库...
若目标MongoDB为分片集群架构实例，请根据业务需求，在目标 云数据库MongoDB版（分片集群架构）实例中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何...
云数据库MongoDB版（分片集群架构）同步至云数据库...
若目标MongoDB为分片集群架构实例，请根据业务需求，在目标 云数据库MongoDB版（分片集群架构）实例中创建需要分片的数据库和集合、配置数据分片、开启Balancer并进行预分片。更多信息，请参见 设置数据分片以充分利用Shard性能 和 如何...
PolarDB HTAP实时数据分析技术解密
在存储层将数据分片至不同的线程，多个线程并行计算。并将结果流水线汇总到总线程。最后，总线程做些简单归并返回给用户。并行查询的加入使得PolarDB突破了单核执行性能的限制，利用多核CPU的并行处理能力，PolarDB部分SQL查询耗时成指数级...
列存索引技术架构介绍
在存储层将数据分片到不同的线程上，由多个线程并行计算，并将结果流水线汇总到总线程。最后，总线程做简单归并返回给用户，以提高查询效率。并行查询突破了单核执行性能的限制，利用多核CPU的并行处理能力，使得部分SQL查询耗时成指数级...
同步时源库为MongoDB的注意事项及限制
源库为MongoDB的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：MongoDB（副本集架构）同步至MongoDB（副本集架构、分片集群架构）MongoDB（分片集群架构）间双向同步 MongoDB（分片集群架构）间单向同步 MongoDB（副本集...
离线同步常见问题
MaxCompute如何实现列筛选、重排序和补空等 MaxCompute列配置错误的处理 MaxCompute分区配置注意事项 MaxCompute任务重跑和failover 报错信息及解决方案 报错信息及解决方案 数据同步报错：[TASK_MAX_SLOT_EXCEED]:Unable to find a ...
产品计费
服务类型 单价（元）计费单位 购买数量 备注 大数据技术架构方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据搬站迁云方案咨询 30,000 每人日 1~20 每日8小时工作制 大数据解决方案POC 30,000 每人日 1~20 每日8小时工作制 跨地域迁移...
Db2 for LUW同步至AnalyticDB MySQL版 3.0
说明 如为增量同步任务，DTS要求源数据库的数据日志保存24小时以上，如为全量同步和增量同步任务，DTS要求源数据库的数据日志至少保留7天以上（您可在全量同步完成后将数据日志保存时间设置为24小时以上），否则DTS可能因无法获取数据日志...
PolarDB MySQL版同步至AnalyticDB MySQL 3.0
使用数据传输服务DTS（Data Transmission Service），可以帮助您将 PolarDB MySQL版 集群同步至 云原生数据仓库AnalyticDB MySQL版 3.0，帮助您快速构建企业内部BI、交互查询、实时报表等系统。前提条件 已创建源 PolarDB MySQL版 集群，...
同步时源库为PolarDB-X 1.0的注意事项及限制
源库为 PolarDB-X 1.0 的同步方案概览 根据如下同步方案，查看同步任务的注意事项及限制：说明 DTS默认同步到目标数据库中时会取消外键约束，因此源数据库的级联、删除等操作不会同步到如下目标数据库：PolarDB-X 1.0 MySQL（RDS MySQL、自...
无感集成（Zero-ETL）
方案概述 在大数据时代，企业面临着大量分散在不同的系统和平台上的业务数据，为了有效地管理和利用这些数据，企业往往需要依赖于ETL工具对数据进行集中式管理。ETL是将上层业务系统的数据经过提取（Extract）、转换清洗（Transform）、...
迁移时源库为MongoDB的注意事项及限制
源库为MongoDB的迁移方案概览 根据如下迁移方案，查看迁移任务的注意事项及限制：MongoDB（单节点架构）迁移至MongoDB（所有架构）MongoDB（副本集架构）迁移至MongoDB（副本集架构、分片集群架构）MongoDB（分片集群架构）间的迁移 ...
高效数据治理实施指南
DataWorks数据治理中心可协助数据治理团队建立数据治理框架、优化治理过程、提升治理效率，从而实现治理目标的高效突破。本文通过治理负责人的实操过程，为您介绍如何通过数据治理计划能力，高效设定和达成数据治理目标。背景信息 在多人...
PolarDB MySQL版同步至Elasticsearch
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB MySQL版 集群的数据同步至 Elasticsearch 实例。前提条件 已创建存储空间大于源 PolarDB MySQL版 的目标 Elasticsearch 实例。具体操作，请参见 创建阿里云...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
PolarDB-X 2.0同步至Elasticsearch
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将 PolarDB-X 2.0 的数据同步至 Elasticsearch 实例。前提条件 已创建源 PolarDB-X 2.0 实例，且需兼容MySQL 5.7版本。已创建目标 Elasticsearch，请参见 创建阿里云...
PolarDB-X 2.0迁移至Elasticsearch
如为增量迁移任务，DTS要求源数据库的本地Binlog日志保存24小时以上，如为全量迁移和增量迁移任务，DTS要求源数据库的本地Binlog日志至少保留7天以上（您可在全量迁移完成后将Binlog保存时间设置为24小时以上），否则DTS可能因无法获取...
RDS MySQL迁移至Tair/Redis
数据传输服务DTS（Data Transmission Service）支持将MySQL数据库（例如自建MySQL或RDS MySQL）迁移至 云原生内存数据库Tair 或 云数据库Redis，降低后端关系型数据库的负载，从而提升用户体验。本文以 RDS MySQL 实例为源，云数据库Redis ...
客户案例
MaxCompute已被广泛应用于各大领域处理云上大数据，帮助众多企业解决了海量数据分析问题，同时降低企业运维成本，企业人员可更专注于业务开发。本文为您介绍MaxCompute的精选客户案例。MaxCompute的全量客户案例信息，请参见 行业客户案例...
- 产品推荐
- 这些文档可能帮助您