数据清理
查看数据清理任务 任务信息 在 任务中心 的数据清理列表中，单击操作列中的 查看 按钮。在弹出的任务详情面板中，单击 任务信息 页签查看任务类型、源数据库、目标数据库、变量配置、归档范围和执行方式等信息。任务流程 在任务详情面板中...
产品功能
数据清理 您可以在控制台上根据度量（Metric）进行数据清理，或者通过 API 进行更灵活的数据清理。高效压缩存储 TSDB 使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的...
数据清理白名单
该数据清理机制支持定制，通过配置实现在不同情况下对 SharedPreference、Database 数据库的清理，在极特殊情况下清空整个应用的数据，以保证应用的正常运行。目前该机制已经覆盖了 10.1.32、10.1.60 和 10.1.68 系列基线。为满足保护重要...
CreateDataCronClearOrder-创建历史数据清理工单
创建历史数据清理工单。接口说明 目前仅支持安全协同管控模式的 MySQL 实例调用该接口。关于该功能的更多说明，请参见 历史数据清理。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer...
引擎功能
数据库内机器学习 Lindorm时序引擎提供开箱即用的数据库内机器学习服务。您可以通过SQL语句直接在数据库内完成整个机器学习流程，挖掘更深的数据价值。使用数据库内机器学习服务的优势主要体现在以下几个方面：简单易用：无需掌握专业的...
RDS MySQL数据文件占满磁盘空间导致出现“锁定中”...
问题描述 云数据库RDS MySQL实例由于写入的数据太多，导致数据文件占满磁盘空间，从而导致实例的运行状态为 锁定中。问题原因 RDS MySQL实例可能会由于数据文件长时间未整理导致实例空间满，为避免数据丢失，RDS MySQL会对实例进行自动锁定...
RDS MySQL数据文件占满磁盘空间导致出现“锁定中”...
问题描述 云数据库RDS MySQL实例由于写入的数据太多，导致数据文件占满磁盘空间，从而导致实例的运行状态为 锁定中。问题原因 RDS MySQL实例可能会由于数据文件长时间未整理导致实例空间满，为避免数据丢失，RDS MySQL会对实例进行自动锁定...
AUTO模式核心特性及典型场景
热点分裂——有效解决数据热点 对于热点数据，PolarDB-X 支持两种处理方式：第一种方案是将热点数据所在的分区数据迁移到特定的数据节点，让热点数据以独享存储资源的方式服务业务，能够实现热点数据不影响非热点数据的业务。具体操作步骤...
技术原理
全量迁移 系统选择当前时间之前的一个时间点，将这个时间点之前的数据进行全量的数据复制迁移。增量数据同步 完成全量迁移后，基于全量迁移开始之前时间点的增量变更日志进行增量同步，最终原分库和目标分库数据实时同步。数据校验 增量...
表数据管理
ODC 中用颜色标识您对表中数据的操作，新增的数据用绿色标识，删除的数据用红色标识，修改后的数据用橙色标识。编辑态下，导航栏提供了以下操作键功能编辑表中的数据：功能 说明 添加行 单击该功能键将在表中指定位置插入一个空行。双击...
离线同步常见问题
读取Loghub同步某字段有数据但是同步过来为空 读取Loghub同步少数据 读取Loghub字段映射时读到的字段不符合预期 读取kafka配置了endDateTime来指定所要同步的数据的截止范围，但是在目的数据源中发现了超过这个时间的数据 Kafka中数据量少...
数据归档至用户OSS
清理：归档完成后，自动用无锁的方式清理源表数据。选择是否校验归档数据：不校验：不校验归档后的数据。校验：归档数据与原库数据进行比对，展示差异信息与归档信息。校验时间随数据量增长。运行方式 选择运行方式，当前支持：单次执行：...
历史数据清理
当数据库出现存储空间不足、表数据量过大导致查询速度变慢等情况时，您可以使用数据管理DMS提供的历史数据清理功能，定期清理历史数据，以提高数据库查询性能和响应速度、避免因存储空间不足而导致数据库性能下降及历史数据堆积对生产环境...
数据库迁移
可选：一致性校验完成后，单击 下一步数据清理，进行源数据清理。完成：数据库迁移工单完成。立即清理：立即执行会实时删除已迁移的表，请谨慎操作。延时清理：在 延时清理 对话框中，指定延时清理时间间隔，可输入时间间隔为1~30天。在...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
云数据库MongoDB版（分片集群架构）同步至云数据库...
数据传输服务DTS（Data Transmission Service）支持将MongoDB（分片集群架构）的数据同步至MongoDB（副本集架构或分片集群架构）。本文以 云数据库MongoDB版 实例间的数据同步为例，为您介绍操作步骤。前提条件 已创建目标 云数据库MongoDB...
在GDB控制台清除实例数据
清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议您不要执行数据更新操作（执行数据更新操作，可能会导致更新的数据被清理）。操作步骤 登录 图数据库控制台。在页面左上角，选择实例所在地域。单击目标实例ID或目标...
表回收站
本文介绍了表回收站的相关操作。...如果您需要清理指定的数据表，在数据表列表中，找到需要清理的表，单击删除。如果您需要清理回收站中的所有数据表，单击清空回收站。关闭表回收站 进入表回收站页面，单击目标数据库页签。单击关闭。
通过HTTP接口清除实例数据
清除数据大约耗时5s（数据量越多，耗时时间越长），在清除数据过程中建议您不要执行数据更新操作（执行数据更新操作，可能会导致更新的数据被清理）。准备工作 如果客户端为ECS实例，您需要确保图数据库GDB实例和ECS实例满足以下条件，以...
数据迁移流程
数据传输提供数据迁移功能，帮助您实现同构或异构数据源之间的数据迁移。适用于数据库升级、跨实例数据...确认数据迁移项目成功，并不再需要同步源库和目标库的数据后，您可以清理当前的数据迁移项目。详情请参见 结束和释放数据迁移项目。
新功能发布记录
功能发布更新 2024年 03月 功能名称 变更类型 功能描述 相关文档 数据工作站 新增 支持以文档形式交付查询的数据和数据变化趋势等信息，并支持在交付后使用智能工具解答数据相关问题。使用数据工作站功能可以提高数据交付效率和数据自助...
Kafka实时入湖建仓分析
注意事项 Kafka中创建的Topic数据超过一定的时间会被自动清理，如果Topic数据过期，同时入湖任务失败，再重新启动时读取不到被清理掉的数据，会有丢失数据的风险。授予RAM子账号创建库表的权限 如果您使用RAM子账号登录，在开始Kafka实时入...
表回收站
回收站表命名规则 Recycle Bin会从不同的数据库中回收表对象到_recycle_bin_数据库中。因此需要定义如下的表名格式，用来保证目标表名的唯一性："_"+<Storage Engine>+参数说明如下：参数 说明 Storage Engine 存储引擎名称。SE private id ...
常见问题
因为含增量任务的同步实例暂停期间，仅目标端的数据写入暂停，源端增量变化的数据依然会进行采集。为什么数据同步的价格要高于数据迁移的价格？因为数据同步具有更多的高级特性，例如支持在线调整同步对象、支持配置MySQL数据库之间的双向...
通过数据同步功能同步Kafka至湖仓版（推荐）
注意事项 Kafka中创建的Topic数据超过一定的时间会被自动清理，如果Topic数据过期，同时数据同步任务失败，重新启动同步任务时读取不到被清理掉的数据，会有丢失数据的风险。因此请适当调大Topic数据的生命周期，并在数据同步任务失败时...
升级告用户书
数据清理和数据归档功能：为了帮助您优化数据库的存储和管理，我们提供了数据清理和数据归档的功能，您可以根据数据的使用频率和重要性，将数据进行分离和清理，以提高数据库的性能和效率。产品交互优化：我们优化了SQL控制台的布局，以...
API概览
GetDataCronClearTaskDetailList 获取历史数据清理工单任务详情 获取历史数据清理工单任务详情。GetDataCorrectRollbackFile 获取数据变更工单提交的回滚附件下载地址 调用GetDataCorrectRollbackFile接口，获取数据变更工单提交的回滚附件...
GetDataCronClearConfig-查询历史数据清理工单的定时...
查询历史数据清理工单的定时配置。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 当前API暂无授权信息透出。请求参数 名称 类型 必填 描述 ...
数据方案概览
历史数据清理 支持历史数据清理，可以根据设定的规则定期清理历史数据。可编程对象 支持存储过程、触发器、函数、视图等对象的变更提交与执行。数据导入 支持大批量数据快速导入至数据库。数据导出 SQL结果集导出 支持数据的SQL结果集导出...
如何清理孤立文档
databasesToProcess：待清理孤立文档的数据库名称数组。MongoDB 4.2及以前版本 说明 该脚本用于清理多个Shard节点中 指定数据库下指定集合的孤立文档。如需清理数据库中多个集合的孤立文档，您可以修改 fullCollectionName 参数并多次执行...
数据保护规则简介
说明 进行任意查询时，涉及的数据都可以用<数据库，数据表，数据列>来表示。只有当数据库、数据表、数据列都被一条规则中的 meta 数据匹配上时，数据才会按照规则中指定的算法进行处理。在设置数据保护规则时，您需要保证 不同规则作用的...
PolarDB PostgreSQL版间的同步
重要 2022年09月09日前创建的数据同步任务，需在配置同步任务前，在源库中创建触发器和函数来捕获DDL信息，详情请参见 通过触发器和函数实现PostgreSQL的DDL增量迁移。增量数据同步阶段不支持同步bit类型的数据。源数据库账号需为高权限...
PolarDB PostgreSQL版同步至云原生数据仓库AnalyticDB...
重要 2022年09月09日前创建的数据同步任务，需在配置同步任务前，在源库中创建触发器和函数来捕获DDL信息，详情请参见 通过触发器和函数实现PostgreSQL的DDL增量迁移。增量数据同步阶段不支持同步bit类型的数据。源数据库账号需为高权限...
创建镜像
清理的个人用户数据如下：Linux系统的镜像 该清理仅影响生成的镜像，生成的镜像文件将清理普通用户和/home 路径下普通用户目录中的数据，不会影响root用户的数据以及安装到系统的应用和数据。Windows系统的镜像 该清理仅影响生成的镜像，...
基本概念
DTS会定期清理过期的增量数据，并更新数据订阅任务的数据范围。说明 增量数据对应的时间戳是指这条增量数据在源库中执行并写入事务日志的时间戳。消费时间点 消费时间点是指客户端消费掉的最新一条增量数据对应的时间戳。每次客户端消费并...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
数据标准概述
应用场景 某集团IT团队制定了关于 员工性别 的数据标准：用male表示男性，用female表示女性，用unknown表示未知。首先，数据标准管理员创建了 性别 码表并同步到开发人员；接着创建了 员工性别 标准，值域范围引用 性别 码表，并添加了 ...
退款说明
注意事项 退订包年包月或按量付费的敏感数据保护服务，不会清理实例上已有的数据分类分级信息（含配置的脱敏规则）。说明 只有关闭实例的敏感数据保护功能，才会清理实例上的数据分类分级信息。更多信息，请参见 关闭敏感数据保护。因退订...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
迁移原理介绍 DTS通过迁移分片集群中的每个Shard节点来实现分片集群数据库的整体迁移，您需要为每个Shard节点创建一个对应的数据迁移任务。说明 数据在目标MongoDB实例中的分布取决于您设置的片键，详情请参见 设置数据分片以充分利用Shard...
使用DTS迁移分片集群架构的自建MongoDB数据库上云
迁移原理介绍 DTS通过迁移分片集群中的每个Shard节点来实现分片集群数据库的整体迁移，您需要为每个Shard节点创建一个对应的数据迁移任务。说明 数据在目标MongoDB实例中的分布取决于您设置的片键，详情请参见 设置数据分片以充分利用Shard...
- 产品推荐
- 这些文档可能帮助您