应用场景
前端的监控系统和大数据处理系统会利用 TSDB 的数据查询和计算分析能力进行业务监控和分析结果的实时展现。电力化工及工业制造监控分析 传统电力化工以及工业制造行业需要通过实时的监控系统进行设备状态检测，故障发现以及业务趋势分析。...
仪表盘
图表自动刷新 图表自动刷新功能可以实现指定刷新数据查询和渲染的时间间隔，无需手动刷新。说明 图表自动刷新可适用于实时报表场景，当数据集实时更新时，使用图表刷新功能可以实时对数据集更新进行可视化展示。选中需要配置的图表。在图表...
概述
这就导致了不同系统之间会进行数据迁移，同一份数据可能在不同源之间冗余，进而出现数据不一致的问题，以及特征难管理、模型难升级等困境。除此之外，数据工程师、算法工程师和开发工程师的人力成本也是当前数据驱动的智能决策应用难以大...
查看系统审计到的语句
查询到数据后，系统会根据查询到的内容，智能列出筛选条件，后续您可以根据条件细粒度筛选。定位到目标语句模板，在 类型设置 列，根据实际业务需求，设置该SQL语句模板类型，单击 保存生效。类型 说明 选中即可设置为信任语句。选中即可...
冷热分离
带TimeRange的查询，系统会根据设置的TimeRange与COLD_BOUNDARY冷热分界线进行比较来决定查询哪个区域的数据（注意TimeRange的单位为毫秒时间戳）get=new Get("row1".getBytes());get.setTimeRange(0,1568203111265)Scan 如果scan不设置Hot...
解决MySQL实例空间满自动锁定的问题
说明 对于RDS MySQL 8.0，系统会自动清理undo文件，不会出现此问题。general_log文件磁盘占用高。当RDS MySQL开启了general_log后，该文件记录了用户的所有操作，包括每条SQL语句的执行细节，无论是查询、插入、更新还是删除操作。当访问量...
解决MySQL实例空间满自动锁定的问题
说明 对于RDS MySQL 8.0，系统会自动清理undo文件，不会出现此问题。general_log文件磁盘占用高。当RDS MySQL开启了general_log后，该文件记录了用户的所有操作，包括每条SQL语句的执行细节，无论是查询、插入、更新还是删除操作。当访问量...
PolarDB MySQL版CPU使用率高
整个数据库系统的缓存区域，是数据交换最为频繁的位置，如果内存不足和内存页争抢，则会出现各种异常的堆积和慢查询。最典型的表现是数据库突然CPU上涨打满，并且出现慢查询。经过排查后发现该问题并非索引缺失，这个时候就有可能是内存...
概述
脱敏方案对比 脱敏方案 说明 优点 缺点 动态脱敏 当应用程序发起数据查询请求时，系统会在数据库内部对敏感数据进行变换后再返回给应用程序。开始查询前，仅需指定需要进行脱敏查询的数据库账号，以及需要脱敏的数据库、表或列的名称即可。...
管理问题数据
查看问题数据 您可以进入 任务查询 页面，找到目标表，单击 操作 列的 详情，在任务详情页面单击 问题数据 查看本次问题数据产生的质量监控规则、问题数据表详情、问题数据预览。说明 若预览问题数据无权限或通过命令查询问题数据表无权限...
2023年
无 缺陷修复 修复带SORT KEY的内存攒批任务执行后可能会出现的查询报错问题。修复Serverless实例读取字符串类型数据可能出错的问题。修复WHERE子句中过滤条件过多可能出错的问题。修复SQL包含like语句时可能出现报错的问题。修复扩缩容等锁...
CREATE VIEW
如果定义者被撤权后，即使调用者仍拥有视图的查询权限，仍然会出现无法查询视图的问题。说明 若未设置该参数，AnalyticDB MySQL版 默认使用 INVOKER 安全验证方式，即调用者查询视图数据时，需要同时拥有视图的查询权限和视图所引用对象的...
2023年
无 缺陷修复 修复智能诊断功能统计表大小时可能会出现数字溢出的问题，现已将统计表大小的列由integer数据类型修改为bigint数据类型。修复分区表UPDATE分布键列时出现 tuple already updated by self 错误信息的问题。修复Master节点不回收...
SQL查询
数据源白名单访问控制 当使用数据分析操作MaxCompute表数据时，如果MaxCompute项目空间开启了白名单访问控制，数据分析的相关服务（例如，费用计算、数据下载、维表使用、数据上传等）可能会出现报错。为保证DataWorks数据分析服务能顺利...
MySQL系统文件导致实例空间满的解决方法
说明 对于RDS MySQL 8.0，系统会自动清理undo文件，不会出现此问题。解决方法 步骤一：解锁实例。扩容实例存储空间后可解锁实例。扩容存储空间的详细操作请参见 变更配置。步骤二：清理undo文件。对于 RDS MySQL 5.7：连接RDS MySQL实例并...
RDS MySQL如何管理长时间执行的查询
出现原因 在使用RDS MySQL的过程中，由于某些原因，例如被SQL注入、SQL执行效率较差、DDL语句引起表元数据锁等待等，会出现运行时间很长的查询。说明：元数据锁等待的问题请参考 解决MDL锁导致无法操作数据库的问题。由于SQL执行效率差而...
分析实例简介
使用场景 随着企业业务发展，精细化实时运营诉求越来越强烈，RDS MySQL用户经常会遇到以下问题：进行复杂分析查询时，经常会出现查询卡顿。只读实例只能分担读压力，无法从根本上解决复杂分析慢的问题。构建实时数仓成本太高，公司留给数据...
查询用户OSS或专属存储的归档数据
本文介绍查询用户OSS或专属存储的归档数据的操作步骤以及常见问题。前提条件 已完成 数据归档至用户OSS 或 数据归档至专属存储 的用户，包含老用户和新用户。说明 老用户：数据归档查询功能未上线（上线时间：2022年09月14日）前，使用过...
Logview诊断实践
数据跨集群复制阶段 问题现象：子状态列表里面出现多次 Task rerun，Result 里有错误信息 FAILED:ODPS-0110141:Data version exception。作业看似失败了，实际还在执行，说明作业正在做数据的跨集群复制。产生原因一：Project刚做集群迁移...
大数据安全治理的难点
大数据系统以数据类型多（结构化、非结构化、半结构化）、数据量大（动辄PB级别）著称，某些巨头组织一天就能新增数十万甚至数百万张表，如此体量给数据分级分类带来了极大挑战，通过人工进行数据分级分类显然是不现实的，难免会出现遗漏的...
Stage级别诊断结果
对于Join条件存在数据倾斜的场景，如果不广播小表，那么会出现如下图的执行流程：假设上图中的表 Tsmall 在 b 字段上存在严重数据倾斜，那么当表 Tbig 以 a 字段均匀地分布在 AnalyticDB MySQL版 的存储节点上时，对 Tbig 表的重分布会存在...
MySQL系统文件导致实例空间满的解决方法
说明 对于RDS MySQL 8.0，系统会自动清理undo文件，不会出现此问题。解决方法 步骤一：解锁实例。扩容实例存储空间后可解锁实例。扩容存储空间的详细操作请参见 变更配置。步骤二：清理undo文件。对于 RDS MySQL 5.7：连接RDS MySQL实例并...
库表数太多导致实例卡顿或异常
说明 库表数量多不一定会出现问题，是否出现问题与业务模型和负载等因素也有关系。例如以下两种业务场景，数据库规格相同且都有1万的库表数和10万的总文件数，但面临的问题完全不一样：会计软件系统：访问具备明显的聚集性特征，大多数库表...
时序引擎版本说明
修复最新值查询在扩容后可能会出现返回多条数据的问题。修复降采样查询中不支持常量折叠计算的问题。修复正则查询降采样数据时间条件不生效的问题。3.4.10 2022年02月28日 新特性 SQL查询语句tags支持通过正则表达式过滤。支持non_negative...
PolarDB MySQL版8.0.1版本发布日志
2024-01-19 问题修复 修复使用列存索引（IMCI）功能查询TopK数据时，因查询语句中涉及的表中的NULL值过多，进行倒序排序时排序结果错误的问题。修复只读列存节点在涉及列存索引表的DDL执行过程中启动时，无法恢复列存数据的问题。修复在...
按时间戳冷热分离
Lindorm(main):018:0>scan 'chsTable'，{STARTROW=>'row1',STOPROW=>'row9'，HOT_ONLY=>true} 带 TimeRange 的查询，系统会将设置的 TimeRange 与 COLD_BOUNDARY 冷热分界线进行比较来决定查询哪个区域的数据。Lindorm(main):019:0>scan '...
慢日志分析
常见问题 Q：对于 RDS MySQL 和 PolarDB MySQL版 数据库实例，为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和...
慢日志
常见问题 Q：为什么会出现慢日志记录的SQL执行完成时间与SQL语句的实际执行时间不同？A：通常情况下是执行SQL语句修改了时区。慢日志记录的SQL执行时间的时区，存在会话级别、数据库级别和系统级别。慢日志时间设置逻辑为：当数据库存在...
PolarDB死锁
数据库系统会自动牺牲回滚代价最小的事务，从而导致对应的写请求失败。更严重的情况是在大量死锁发生时，会导致数据库系统效率低下，大量进程堆积进而引发性能问题。正常情况下，死锁都是由于逻辑加锁的顺序导致的，也就是我们常说的ABA...
2021年
并行查询 排序加速计算 当您执行 SORT后，系统会对表数据进行排序，当数据完成排序后，AnalyticDB PostgreSQL 即可利用数据的物理顺序，将SORT算子下推到存储层进行计算加速。该特性可以基于SORT KEY加速SORT、AGG、JOIN算子。排序加速计算...
查询结果不符合预期的常见原因
Lindorm宽表经常会被应用在大数据链路中，如果写入链路出现问题，则可能导致写入延迟或无法正常写入数据，此时进行数据查询，该行数据还未写入，因此会产生无法查询到数据的情况。如果您在使用中遇到数据写入一段时间后才能查到的情况，...
LTS（原BDS）服务介绍
主备容灾 通过LTS在主备集群之间实现实时数据的双向同步，当主集群出现问题，可以切换到备集群，尽可能减少对业务产生的影响，当主集群服务恢复之后，通过LTS同步服务补齐主集群遗漏的数据。RDS历史库建设 对于交易订单等存储场景，随着...
PolarDB MySQL版8.0.2版本发布日志
修复在B-tree较高或B-tree数据倾斜的大表上执行并行查询操作时，可能存在的并行分片数目过少，或并发worker数据不均衡的问题。8.0.2.2.22 类别 说明 发布时间 新增功能和性能优化 支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、...
PolarDB HTAP实时数据分析技术解密
但是应用这个方案的前提是用户需要迁移到对应的NewSQL数据库系统，而这会出现各种兼容性适配问题。一体化的行列混合存储方案 较多副本Divergent Design方法更进一步的方案，是在同一个数据库实例中采用行列混合存储，同时响应TP型和AP型...
云数据库录入
说明 在第一次录入云数据库时，DMS系统会同步云数据库侧的名称。后续不再进行同步，您可以通过编辑实例来维护实例名称。具体操作，请参见 编辑实例。开启DBLink 选择是否开启DBLink，详情请参见 逻辑数仓。无锁结构变更 选择是否开启无锁...
使用执行计划分析查询
系统会根据实际数据量选择Bytes、KB、MB、GB或TB为单位。输入行数 目标Stage输入的行数。输入大小 目标Stage输入的数据量。系统会根据实际数据量选择Bytes、KB、MB、GB或TB为单位。扫描行数 目标Stage扫描的行数。说明 仅当目标Stage中存在...
调优集群性能
如下图所示，某个大表分布不均，存储节点0上的Shard_0和Shard_1中数据量较大，而在存储节点1上的Shard_2和Shard_3中数据量较小，那么当您查询这个大表时，较大概率会出现存储节点0需要处理的数据多，存储节点1上需要处理的数据少的情况，...
通过自治服务解决MySQL实例CPU使用率过高的问题
本文将介绍如何使用数据库自治服务DAS（Database Autonomy ...如果内存中没有对应的数据，系统会触发从磁盘读取数据的操作。这两个数据获取过程分别是逻辑读和物理读，如下图所示。相关文档 RDS MySQL慢日志分析 适用于 云数据库RDS MySQL
数据归档至专属存储
此时归档任务下会出现文件合并任务。系统自动执行此任务，您需要等待任务状态从 正在执行 变为 执行成功，此执行过程耗时长短与您归档数据的存储量有关。说明 文件合并任务执行完成后，系统会自动将数据源替换为合并后的文件。查询文件合并...
库表结构优化
数据特征差异 用户的数据分布和查询特征会随着业务特征的变化而变化，若一直按照最初的建模方式和SQL语句，将无法保障SQL引擎发挥出最大优势，而数据特征或业务模型的变化，都会导致SQL性能回退。基于以上问题，AnalyticDB MySQL版 为用户...
- 产品推荐
- 这些文档可能帮助您