连接失败常见报错
解决方法：检查实例的连接地址，在连接串中填写正确的鉴权数据库。鉴权数据库用于存储数据库账号和密码。数据库账号必须在所属的数据库下进行鉴权，才能鉴权成功。xxx@dds-xxx.mongodb.rds.aliyuncs....
数据清理
本文档旨在介绍如何通过提交数据清理工单实现归档数据。原理介绍 前提条件 清理的表中必须包含主键。注意事项 前置条件：OceanBase 数据源必须通过 OBproxy 连接（暂不支持对直连的 OceanBase 进行归档操作）。OceanBase 数据源目前仅支持...
版本说明
问题修复 修复数据清理和度量删除未生效的问题；修复控制台列表页打开异常的问题；修复并发查询报错的问题。V1.2.0 2018年2月7日 功能优化 优化实例稳定性，解决大查询造成的实例服务不稳定；实例降采样（downsample）默认依据实例所在地域...
产品功能
数据清理 您可以在控制台上根据度量（Metric）进行数据清理，或者通过 API 进行更灵活的数据清理。高效压缩存储 TSDB 使用高效的数据压缩技术，将单个数据点的平均使用存储空间降为1~2个字节，可以降低90%存储使用空间，同时加快数据写入的...
通过DMS登录MySQL数据库提示“登录...用户名或密码错误...
解决方案 说明 如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据修改，建议提前创建快照或开启RDS日志备份等功能。如果您在阿里云平台授权...
数据清理白名单
为应对可能发生的连续启动崩溃的情况，mPaaS 建立了数据清理的机制。当 mPaaS 框架启动完成前应用出现卡死或重要线程（例如主线程、multidex.init 线程、ApplicationAgent.init 线程等）发生闪退时，框架可能触发数据清理。该数据清理机制...
历史数据清理
当数据库出现存储空间不足、表数据量过大导致查询速度变慢等情况时，您可以使用数据管理DMS提供的历史数据清理功能，定期清理历史数据，以提高数据库查询性能和响应速度、避免因存储空间不足而导致数据库性能下降及历史数据堆积对生产环境...
2023-12-08
数据服务上线新加坡地域 中国站和国际站的企业版实例数据服务上线新加坡地域，支持多数据源接入、...自定义存储表支持数据清理 自定义存储表支持数据清理，事务表支持按全表或主键清理，分区表支持按分区或主键清理，时序表支持按全表清理。
数据方案概览
历史数据清理 支持历史数据清理，可以根据设定的规则定期清理历史数据。可编程对象 支持存储过程、触发器、函数、视图等对象的变更提交与执行。数据导入 支持大批量数据快速导入至数据库。数据导出 SQL结果集导出 支持数据的SQL结果集导出...
PluginType参数说明
结构设计 NDDL 结构同步 TABLE_SYNC 普通数据变更 DC_COMMON 无锁变更 DC_CHUNK 历史数据清理 DC_CRON_CLEAR 可编程对象 DC_PROC 批量数据导入 DC_BIG_FILE 数据导出 DATA_EXPORT 数据库导出 DB_EXPORT SQL审核 SQLReview 数据库克隆 ...
调度设计文档
Null ods_raw_log_d 日 320170261 ods_log_info_d 原始数据脏数据清理 ods_raw_log_d ods_log_info_d320170259 日 320170262 dw_user_info_all_d 轻度汇总数据 ods_log_info_d dw_user_info_all_d 日 320170263 rpt_user_info_d 统计汇总...
使用数据订阅SDK出现“client partition is empty,...
解决方案 确认数据订阅是否正在启动中。如果是正在启动中，则只需要耐心等待数据订阅正常启动。如果数据订阅已经正常启动，则需要排查是否有多个Client消费数据，如有多个，只有正在订阅数据的Client异常或是出现网络连接异常时后，Backup...
释放引擎
在进行数据清理前，请确保您的重要数据已进行备份。使用限制 仅支持释放LTS服务和搜索引擎，其他引擎暂不支持释放。注意事项 释放引擎功能目前处于公测阶段，如需使用，请联系Lindorm技术支持（钉钉号：s0s3eg3）为您添加使用权限。引擎...
数据库管理
无论是冷数据归档还是数据到期清理工作，都是通过时序引擎的异步compaction任务执行的，因此，冷数据归档和TTL数据清理可能存在滞后的情况。对Database既设置了冷热分界线，又设置了TTL的情况下，已归档的冷数据的时间戳如果超过了TTL定义...
我是普通用户
数据方案 数据变更 对数据进行变更，以满足上线数据初始化、历史数据清理、问题修复、测试等诉求。数据导入 通过数据导入功能可以批量将数据导入至数据库。数据导出 进行大量数据分析或提取相关数据时可以使用数据导出功能。数据追踪 由于...
API概览
GetDataCronClearTaskDetailList 获取历史数据清理工单任务详情 获取历史数据清理工单任务详情。GetDataCorrectRollbackFile 获取数据变更工单提交的回滚附件下载地址 调用GetDataCorrectRollbackFile接口，获取数据变更工单提交的回滚附件...
功能特性
DBS内置存储 备份数据清理 支持TTL过期系统自动删除备份数据、用户手动删除备份数据。DBS备份集生命周期 删除或减少RDS备份 PolarDB备份集生命周期 MongoDB备份集生命周期 Redis备份集生命周期 本地日志清理 删除数据库中本地存储的日志。...
生命周期管理
多元索引每天会自动清理已过期的数据，过期数据的清理粒度为“天”，因此您仍然可以查询到某一时刻已过期但是还未及时清理的数据，多元索引会在下一次清理过期数据时自动清理这些过期数据。数据表和多元索引的TTL更新后，系统会在下一次...
什么是云原生数据湖分析
云原生数据湖分析（简称DLA）是新一代大数据解决方案，采取计算与存储完全分离的架构，支持数据库（RDS\PolarDB\NoSQL）与消息实时归档建仓，提供弹性的Spark与Presto，满足在线交互式查询、流处理、批处理、机器学习等诉求，也是传统...
生命周期管理
多元索引每天会自动清理已过期的数据，过期数据的清理粒度为“天”，因此您仍然可以查询到某一时刻已过期但是还未及时清理的数据，多元索引会在下一次清理过期数据时自动清理这些过期数据。数据表和多元索引的TTL更新后，系统会在下一次...
管理导入任务
如果表数据出现错误或延迟，需要从导入任务做排查，以看到任务是否正在在运行，是否存在延迟等情况。前提条件 已连接对应的实例，详情请参见 管理StarRocks Manager连接。使用限制 该功能仅支持2.5.8-1.7-1.1.3及之后版本使用。查看导入...
支持的数据库类型与功能
SQL结果集导出 ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ 表数据导出 ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ❌ ✔️ ✔️ ✔️ 数据变更 ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ ✔️ 历史数据清理 ✔️ ✔️ ❌...
某网约车公司车辆轨迹数据
随着车辆数量的快速增长，每辆车每分钟上传轨迹、位置等信息到MySQL导致MySQL库数据量过大，将全量数据写到 云原生多模数据库 Lindorm 中可以解决数据量过多和成本问题。业务挑战 目前线下有7万+辆车，车辆数量在快速增长，每辆车每分钟...
与TSDB的功能对比
只支持全局TTL，且仅能清理数据，无法清理索引。冷热存储分层 支持库级别的冷热分层设置，支持 冷数据归档至OSS。不支持 性能 可扩展至每秒千万点数据点写入，详情请参见 性能白皮书。可扩展至每秒百万数据点写入 应用领域 可广泛用于物...
配置SAP HANA输出组件
追加数据策略下，当指主键、约束冲突时，系统会提示脏数据错误。覆盖数据策略下，当主键、约束冲突时，系统会先删除原数据，再插入整行新数据。解析方案 非必选项，选择输出数据前后的一些操作。解析方案 包括 填写准备语句 和 填写完成...
磁盘锁定之后如何清理数据？
如何清理数据 当实例因磁盘满被锁定时，AnalyticDB for PostgreSQL 仍然支持对数据表进行truncate/drop/grant 操作。清理数据后，如果磁盘空间降到阈值以下，过大约5分钟实例会自动解锁。注意 实例锁定后，不支持 delete 操作。因为 delete...
配置GBase 8a输出组件
同步其他数据源的数据至GBase 8a数据源的场景中，完成源数据源的信息配置后，需要配置GBase 8a输出组件写入数据的目标数据源。本文为您介绍如何配置GBase 8a输出组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源...
配置GoldenDB输出组件
同步其他数据源的数据至GoldenDB数据源的场景中，完成源数据源的信息配置后，需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源...
配置GoldenDB输出组件
同步其他数据源的数据至GoldenDB数据源的场景中，完成源数据源的信息配置后，需要配置GoldenDB输出组件写入数据的目标数据源。本文为您介绍如何配置GoldenDB输出组件。前提条件 已创建GoldenDB数据源，如何创建，请参见 创建GoldenDB数据源...
配置GBase 8a输出组件
同步其他数据源的数据至GBase 8a数据源的场景中，完成源数据源的信息配置后，需要配置GBase 8a输出组件写入数据的目标数据源。本文为您介绍如何配置GBase 8a输出组件。前提条件 已创建GBase 8a数据源，如何创建，请参见 创建GBase 8a数据源...
配置Impala输出组件
同步其他数据源的数据至Impala数据源的场景中，完成源数据源的信息配置后，需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源，如何创建，请参见 创建Impala数据源。进行...
配置ArgoDB输出组件
配置ArgoDB输出组件，可以将外部数据库中读取的数据写入到ArgoDB，或从大数据平台对接的存储系统中将数据复制推送至ArgoDB，进行数据整合和再加工。本文为您介绍如何配置ArgoDB输出组件。使用限制 ArgoDB输出组件支持写入文件格式为orc、...
配置Impala输出组件
同步其他数据源的数据至Impala数据源的场景中，完成源数据源的信息配置后，需要配置Impala输出组件写入数据的目标数据源。本文为您介绍如何配置Impala输出组件。前提条件 已创建Impala数据源，如何创建，请参见 创建Impala数据源。进行...
表回收站
清理数据表 进入表回收站页面，单击目标数据库页签，查看当前表回收站中的数据表列表。如果您需要清理指定的数据表，在数据表列表中，找到需要清理的表，单击删除。如果您需要清理回收站中的所有数据表，单击清空回收站。关闭表回收站 进入...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置MySQL输出组件
同步其他数据源的数据至MySQL数据源的场景中，完成源数据源的信息配置后，需要配置MySQL输出组件的目标数据源。本文为您介绍如何配置MySQL输出组件。前提条件 已创建MySQL数据源，详情请参见 创建MySQL数据源。进行FTP输出组件属性配置的...
配置TDH Inceptor输出组件
同步其他数据源的数据至TDH Inceptor数据源的场景中，完成源数据源的信息配置后，需要配置TDH Inceptor输出组件写入数据的目标数据源。本文为您介绍如何配置TDH Inceptor输出组件。使用限制 TDH Inceptor输出组件支持写入文件格式为orc、...
产品简介
大数据专家服务 大数据专家服务（Bigdata Expert Service）是由阿里云大数据专家基于阿里云多年大数据架构、应用、运维、AI算法建模等最佳实践经验及方法论为用户提供全方位的大数据产品技术、咨询服务及售后专家服务运维保障，帮助用户...
解决方案与客户案例
数据层：数据层解决数据库跨地域的部署与同步问题，并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略：UNIT类型：每个单元部署独立的数据库系统，单元之间通过DTS进行...
解决方案与客户案例
数据层 数据层解决数据库跨地域的部署与同步问题，并在灾难发生时对流量切换动作提供相应的数据质量保护策略。针对上层业务不同的服务类型提供UNIT和COPY两种数据同步策略：UNIT类型：每个单元部署独立的数据库系统，单元之间通过DTS进行...
- 产品推荐
- 这些文档可能帮助您