新功能发布记录
WLM 优化 基础统计信息 优化基础统计信息的收集策略。无 列组统计信息 优化列组统计信息的收集策略。无 Internal Error报错信息 优化Internal Error报错信息，帮助用户快速分析定位问题。无 异步生成Split 对于数据量大的外表，可以在生成...
查看运维大屏
数据同步任务报警信息 统计最近时间实时同步任务运行产生的报警信息，以便您快速捕捉异常情况并及时解决。数据同步任务Failover信息 统计实时同步任务在指定时间内的Failover消息，以便总览任务Failover的状态。Failover详情请参见 实时...
Tair小版本发布日志
Tair介绍 随着互联网的高速发展，业务场景变得越来越丰富和复杂，云原生内存数据库Tair 作为一个高可用、高性能的分布式NoSQL数据库，从访问延时、持久化需求、整体成本这三个核心维度考量，基于DRAM、NVM和ESSD云盘存储介质，推出了多种...
排查CPU使用率高的问题
优化业务，例如避免频繁执行数据排序操作。可选：根据业务情况，选择下述方法对实例进行调整：调整实例为 读写分离架构，对高消耗命令或应用进行分流。调整实例为 内存型，利用其多线程的特性降低CPU使用率。说明 关于如何变更实例的架构和...
文档更新动态（2022年）
更新说明 周期任务通用说明 手动任务 周期实例通用说明 手动实例 配置离线监控报警规则 2022年02月 更新时间 特性 描述 类别 产品文档 2022年02月09日 优化数据服务概述 优化数据服务概述中使用场景说明的图片。更新说明 数据服务概述 2022...
资源使用优化
数据库自治服务 DAS（Database Autonomy Service）是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务，帮助用户消除数据库管理的复杂性及人工操作引发的服务故障，有效保障数据库服务的稳定、安全及...
RDS SQL Server空间不足问题
数据空间的回收通常有如下几种方式：归档数据 删除数据库中不常用的数据（例如早期的历史数据），或者根据需要迁移到其他数据库实例中，或者以其他形式归档保存，通过直接减少数据量来降低已使用数据空间大小。这种方式是控制数据空间增长...
客户案例
大数据处理能力：随着阿里巴巴集团业务的高速发展，推广营销在商业引流上的重要性越发明显，报表作为营销产品的闭环，其诉求也越发的多样化、个性化，报表数据在近几年的发展中在量级上已经增长到TB甚至数十 TB 的规模。这个时候存储系统的...
高性能能力
物理优化器主要对连接顺序，连接算法，访问路径进行优化，同时会考虑到元数据，统计信息等。综合上述信息后，就能估算出模型的执行代价，然后选择出成本最低的执行计划，使得SQL能够高效运行。SPM SPM 提供在线的SQL管理能力，允许用户不...
常见Latency（时延）事件的处理建议
检查业务是否存在不必要的数据，并进行优化。扩容实例规格，尽量避免到达Maxmemory触发内存逐出。EvictionDel 在逐出周期中删除Key（键）的耗时。通常在逐出大Key时产生。尽量避免使用大Key。开启 lazyfree-lazy-eviction 参数，使用异步...
创建数仓分层
数仓分层保障了数据在进入数据仓库之前都经过清洗和过滤，使原始数据不再杂乱无章，优化了查询过程，有效的提高了数据获取、统计和分析的效率。同时，数仓分层实现了各种不同维度数据的关联，使多维分析更加方便，为从多角度、多层次地数据...
发现并处理大Key和热Key
大Key和热Key产生的原因 未正确使用 Tair 命令、业务规划不足、无效数据的堆积、访问量突增等都会产生大Key与热Key，如：大key 在不适用的场景下使用 Tair，易造成Key的value过大，如使用String类型的Key存放大体积二进制文件型数据；业务...
查询治理
数据库自治服务DAS（Database Autonomy Service）通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。前提条件 目标...
查询治理
数据库自治服务DAS（Database Autonomy Service）通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。前提条件 目标...
查询治理
数据库自治服务DAS（Database Autonomy Service）为RDS PostgreSQL提供查询治理功能，通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理...
查询治理
数据库自治服务DAS（Database Autonomy Service）通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。前提条件 目标...
PostgreSQL Serverless实例简介
对高吞吐写入场景和高并发业务进行了设计优化，同时提供了弹性伸缩能力，适合业务数据量大、并具有典型的业务访问波峰波谷场景。优势 更低的成本：对于创业初期的企业，PostgreSQL Serverless不依赖其他的基础设施和相关服务，即买即用并...
时序引擎版本说明
为提升用户体验，云原生多模数据库 Lindorm会不定期地发布版本，用于丰富云产品功能或修复已知缺陷。您可以参阅本文了解Lindorm时序引擎的版本更新说明，选择在业务低峰期升级实例的时序引擎版本。如何查看或升级实例的时序引擎版本 您可以...
发现并处理Redis的大Key和热Key
大Key和热Key产生的原因 未正确使用Redis、业务规划不足、无效数据的堆积、访问量突增等都会产生大Key与热Key，如：大key 在不适用的场景下使用Redis，易造成Key的value过大，如使用String类型的Key存放大体积二进制文件型数据；业务上线前...
查询治理
数据库自治服务DAS（Database Autonomy Service）为RDS MySQL提供查询治理功能，通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和...
分区表常见问题
如果表的数据量很大，则需要在业务低峰期执行重写操作。您可以通过以下SQL语句来查询重写DDL的执行进度和预估剩余时间：SELECT pl.ID,pl.INFO,esc.THREAD_ID,esc.EVENT_NAME,(esc.WORK_COMPLETED/esc.WORK_ESTIMATED)*100 as PROGRESS,pl....
查询治理
数据库自治服务DAS（Database Autonomy Service）通过离线数据分析技术，在每天凌晨1点将全部实例在昨天产生的慢SQL进行统计分析和自动打标，帮助您对慢SQL进行自动分类和划分治理优先级，同时提供治理建议和数据导出功能。前提条件 目标...
通过 HyperLoglog 实现高性能多维数据透视
hll_cardinality(uid2_hll)-hll_cardinality(uid1_hll)预计算调度 在优化前，业务通过即时JOIN得到透视结果，而优化后使用事先统计的方法来获得透视结果，而事先统计本身需要调度。调度方法取决于数据的来源以及数据合并的方法（流式增量或...
常见问题
A：PolarDB 是一个关系型数据库云服务，目前已在全球十多个地域（Region）的数据中心部署，向用户提供开箱即用的在线数据库服务。PolarDB 目前支持3种独立的引擎，分别可以100%兼容MySQL、100%兼容PostgreSQL、高度兼容Oracle语法，存储...
可观测性能力
同时，云原生内存数据库Tair 还基于三大数据支柱进行信息聚合，提供数据分析能力，下表为 云原生内存数据库Tair、云数据库Redis与原生Redis的可观测性能力对比。为便于浏览和内容表达，表格约定使用下述注释：✔️表示支持。❌表示不支持。...
可观测性能力介绍
您可以通过 云数据库Redis版 的 实时Top Key统计 功能，帮助定位热Key与大Key，实时Top Key统计 功能支持实时展示实例中的热Key和大Key信息，同时支持查看4天内大Key和热Key的历史信息。实时Top Key统计 功能准确性高，且对性能几乎无影响...
新功能发布记录
07-18 使用白名单模板批量配置白名单 新增 管理数据库 RDS SQL Server支持在RDS管理控制台查看或修改数据库中的各类属性，同时也支持手动收缩数据库事务日志和更新数据库统计信息，以优化数据库性能和提高查询效率。07-11 数据库高级特性...
数据导入性能优化
此时，集群CPU使用率、磁盘IO使用率处于较低水位，但写入响应时间较高，同时您可以在 诊断优化>数据建模诊断 页面的倾斜诊断表中发现目标表。解决方法：重新设计表结构后再导入数据，详情请参见 表结构设计。通过JDBC使用程序导入数据调优 ...
数据导入性能优化
此时，集群CPU使用率、磁盘IO使用率处于较低水位，但写入响应时间较高，同时您可以在 诊断优化>数据建模诊断 页面的倾斜诊断表中发现目标表。解决方法：重新设计表结构后再导入数据，详情请参见 表结构设计。通过JDBC使用程序导入数据调优 ...
文档修订记录
数据服务概述 2023.7.31 更新功能 数据治理中心 数据治理中心目前支持处理MaxCompute和E-MapReduce的检查项事件、治理项问题。处理治理项问题 处理检查项事件 2023.7.25 更新功能 管理控制台 新版管理控制台更新上线。管理控制台功能概览 ...
某历史养成类游戏开发公司实时计算和数据仓库方案
2）Greenplum的单表分区数目有限制，同时多级分区支持不够友好，不适用单表数据量比较大且需要永久保存的日志，如果单个分区表数据量比较大的时候查询性能无法满足业务性能需求；3）Greenplum扩容时由于数据要重分布会比较慢；4）Greenplum...
Tair开发运维规范
云原生内存数据库Tair 拥有极强的性能，阿里云结合多年的运维经验，从业务部署、Key的设计、SDK、命令、运维管理等维度展示 Tair 开发运维规范，为您设计高效的业务系统提供参考，帮助您充分发挥Tair的能力。了解 Tair 性能边界 图 1.Tair ...
云数据库Redis开发运维规范
云数据库Redis拥有极强的性能，阿里云结合多年的运维经验，从业务部署、Key的设计、SDK、命令、运维管理等维度展示云数据库Redis开发运维规范，为您设计高效的业务系统提供参考，帮助您充分发挥Redis的能力。了解Redis性能边界 图 1.Redis...
文档更新动态（2023年）
更新说明 创建MySQL数据源 创建PolarDB-X数据源 创建AnalyticDB for MySQL 2.0数据源 创建AnalyticDB for PostgreSQL数据源 创建达梦（DM）数据源 创建TiDB数据源 创建Kafka数据源 离线集成配置优化 新增Apache Doris数据源的离线集成。...
自治服务（CloudDBA）
背景信息 数据库自治服务DAS（Database Autonomy Service），是一种基于机器学习和专家经验实现数据库自感知、自修复、自优化、自运维及自安全的云服务，帮助用户消除数据库管理的复杂性及人工操作引发的服务故障，有效保障数据库服务的...
新功能发布记录
自定义DMS界面布局与样式 数据安全防护更名为安全访问代理 优化 数据安全防护更名为安全访问代理。开启安全访问代理 新增支持对象存储OSS 新增 支持将OSS录入DMS中。离线集成和任务编排的跨库Spark SQL任务节点新增支持OSS。录入对象存储...
深度解析Lindorm搜索索引（SearchIndex）特性
Lindorm SearchIndex提供了最终一致性和强一致性两种语义，对于访问量大、数据延迟性要求不高的场景采用最终一致性，可以提供非常高的吞吐和可用性，而业务访问延迟敏感的业务可以选择强一致性模型，数据写入成功后，索引立即可查。...
列存索引技术架构介绍
优化器在确定一个表的访问方式时，会根据需要访问的数据量来决定是否启用并行执行，如果确定启用并行执行，则会参考一系列状态数据（包括当前系统可用的CPU/Memory/IO资源、目前已经调度和在排队的任务信息、统计信息、query的复杂程度、...
图扑案例
利用Lindorm自研的数据压缩存储和存储优化能力，海量低价值密度的监控数据存储成本也有大幅度降低。为适应日趋复杂化多样化的终端设备、边缘设备、传感器以及第三方系统数据源采集、上报的异构数据，如图3所示，阿里 云原生多模数据库 ...
HTAP中的行列混存查询优化
在用户场景workload中，未开启查询优化时，join按照 的方式执行，下图中d、e表的join（橙色的部分）处理的数据量很大，整个查询60%以上的时间都用于处理这部分大表join。查询效果图如下：开启查询优化后的效果图如下：开启查询优化后，join...
- 产品推荐
- 这些文档可能帮助您