列存表使用排序键和粗糙集索引加速查询
如何选择排序键和排序方式 当您的查询SQL经常包含某一个列或者某几个列的等值或者范围限定条件查询时，比如时间列等，可以考虑使用这些列作为排序键，从而利用数据排序并结合粗糙索引，加速这类SQL的查询速度。一般情况下建议使用组合排序...
SETPROJECT
部分UDF在内存计算、排序的数据量比较大时，会报内存溢出错误，这时候可以调大该参数，但该方法只能暂时缓解，您需要从业务上去优化UDF代码。取值范围：256 MiB~12288 MiB。默认值为1024 MiB。UDF SQL Session odps.sql.udf.timeout 设置...
性能分析
Top SQL语句 Top SQL语句查询，是根据平均响应时间、总响应时间、执行次数几个条件对数据库执行的语句信息进行查询排序，排列顺序由大到小。登录数据库审计系统。具体操作，请参见 登录数据库审计系统。在左侧导航栏，选择 查询分析>性能...
RDS for SQL Server如何回收表空间
MySQL表的空间是独立的一个文件，所以收缩MySQL的大表，可以收缩整体数据库的大小，但是SQL Server所有的表都是在数据库的文件里，只有收缩文件才可以缩小空间。因为MySQL表的空间是独立的一个文件，如果收缩MySQL的大表，会相应收缩整体...
查看系统审计到的语句
TopSQL TopSQL语句查询是根据 平均耗时、耗时总量和 执行次数，对数据库执行的语句信息进行查询排序，并按照由大到小进行排列。可选：选择查询的时间段，单击 查询。查询到数据后，系统会根据查询到的内容，智能列出筛选条件，后续您可以...
搜索（审计）
在线查询时间范围最多为24小时，您可以在数据库实例SQL数据存储时长范围内设置任意的查询开始时间，查看最多24小时的数据。这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询...
Go-SQL-Driver/MySQL 连接 OceanBase 数据库示例程序
import 语句导入了以下四个包：database/sql：用于提供通用的 SQL 数据库访问接口。它定义了一组通用的接口和函数，用于连接和操作各种类型的 SQL 数据库。fmt：用于提供格式化输入和输出的函数。它定义了一组函数，用于将数据格式化为字符...
SQL Pattern
针对导致实例压力过大的Bad SQL，用户还可以通过拦截功能，对其进行拦截，快速恢复实例，详情请参见 Persist plan and Query-Blocker。功能说明 SQL Pattern具备以下功能。Pattern聚合：根据SQL文本，将相似的SQL进行分组。Pattern宏观统计...
任务编排之电商打标
本文使用任务编排中的 单实例SQL赋值节点、条件分支节点 和单实例SQL节点，在数据库层面实现该需求。前提条件 您需要准备一个数据库，且拥有该数据库的变更权限。如需申请权限，请参见 访问控制权限概述。环境准备 登录 数据管理DMS 5.0。...
RDS MySQL I/O高问题
数据库自治服务DAS提供自助SQL优化功能，具体操作，请参见 SQL优化。读取冷数据导致实例I/O高 现象 如果SQL查询或修改的数据不在缓冲池（Buffer Pool），则需要从存储中读取，可能会产生大量的I/O吞吐。您可以在控制台的 自治服务>性能趋势...
Beam使用
例如，SQL语句中包含 sale_date='20230715' 的条件，则数据基于 sale_date 列排序会获得额外的性能收益。您可以在 ORDER BY 子句中指定一个或多个排序键。Beam表会在后台自动对数据基于排序键进行重排序优化。示例 创建带排序建的Beam表。...
SQL使用限制项
MaxCompute SQL是专门为大规模数据集设计的SQL语言，在服务大规模数据场景的同时，也需要遵循一定的限制来确保系统的稳定性和运行效率，本文为您介绍MaxCompute SQL的限制项。限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 ...
如何支持超大事务
然后开启事务，执行以下语句，即每个事务会修改x条记录，修改x字节数据：UPDATE `tb` SET c=“b”where id每个事务执行一次该SQL，数据修改量为x字节，数据修改条数为x。考虑x=8 KB和8 MB的情况。测试结果 测试结论 当数据修改量在8 KB时，...
基于Python DB-API的应用开发
print(sql_upsert)stat.executemany(sql_upsert,[(2,2),(3,3)])#删除数据 sql_delete="delete from test_python where c1=2"print(sql_delete)statement.execute(sql_delete)#修改数据 sql_update="upsert into test_python(c1,c2)values...
性能优化与诊断简介
在RDS SQL Server日常运维中，您可以通过数据库自治服务DAS（Database Autonomy Service）来处理数据库故障、优化性能、提升效率、降低运维成本。DAS是一种基于机器学习和专家经验的云服务，实现数据库自感知、自修复、自优化、自运维和自...
SQL请求行为识别
由于此功能依赖DAS 企业版 的全量SQL数据，根据数据量和不同用户的计算时间差异，分析时间通常需要1~5分钟。查看分析结果。通过指标相关度，可以查看与异常指标关联度最高的SQL指标，以及相关SQL模板及其统计信息。说明 指标相关度取值越...
基于Python的应用开发
python(c1 integer,c2 integer,primary key(c1))"print(sql_create_table)statement.execute(sql_create_table)#插入一行数据 sql_upsert="upsert into test_python(c1,c2)values(1,1)"print(sql_upsert)statement.execute(sql_upsert)#...
DescribeDiagnosisRecords-查询诊断记录
Type 表示排序类型，支持如下取值（取值均不区分大小写）：Desc：降序。Asc：升序。[{"Field":"StartTime","Type":"desc"}]PageNumber integer 否 页码，取值为大于 0 且不超过 Integer 数据类型的最大值。默认值为 1。1 PageSize integer ...
Python
cities 表中插入两组数据 sql="insert into cities values(1,'hangzhou'),(2,'shanghai')"cur.execute(sql)#查询 cities 表中的所有数据 sql='select*from cities' cur.execute(sql)ans=cur.fetchall()print(ans)#删除表 cities sql='drop ...
优化聚合与排序
本文介绍如何优化器和执行器如何处理聚合（Group-by）与排序（Order-by）算子，以达到减少数据传输量和提高执行效率的效果。基本概念 聚合操作（Aggregate，简称Agg）语义为按照 GROUP BY 指定列对输入数据进行聚合的计算，或者不分组、对...
调优集群性能
您可以通过 一键诊断 功能来定位存在问题的查询：Bad SQL检测结果中，高耗时的SQL、数据读取量大的SQL、Stage个数多的SQL、最耗CPU的SQL，都可能导致集群的CPU使用率增高，需要根据自诊断结果或者执行计划进行进一步的分析。异常Pattern...
增量备份数据上云（SQL Server 2008 R2云盘、2012及...
您需要先将全量备份文件上传至阿里云的对象存储服务（OSS），并通过RDS控制台将全量备份数据恢复至指定的RDS SQL Server数据库中。然后通过RDS控制台将差异备份或日志备份文件导入该RDS SQL Server数据库中，以实现增量备份上云的效果。该...
文档更新动态（2024年）
更新说明 通过表映射创建离线数据集 通过SQL加工创建离线数据集 通过表单加工创建离线数据集 标签资产市场概述 创建及管理标签离线服务任务 分析平台-基于分析平台创建SQL查询/基于分析平台创建NoteBook Notebook和SQL查询支持访问MySQL、...
管理健康报告
参数化SQL分析从SQL执行频次、SQL执行总耗时、SQL耗时离散度、SQL CPU资源总消耗、SQL内存资源总消耗、SQL执行失败频次等维度进行排序，获取相应的TOP SQL并展现相关指标。通过参数化SQL分析，您可以：获取StarRocks数据库整体的SQL执行...
计算费用（按量付费）
大部分的SQL作业有分区过滤和列裁剪，所以通常该值会远小于源表数据大小。分区过滤：例如SQL语句中含有 WHERE ds>20130101，ds 是分区列，则计费的数据量仅包括实际读取的分区，不包括其他分区的数据。列裁剪：例如SQL语句 SELECT f1,f2,f3...
如何在较大结果集中使用ORDER BY
本文介绍在数据量较大的结果集场景中Lindorm SQL ORDER BY的使用解决方案以及最佳案例。使用场景 常见Lindorm SQL的ORDER BY语法使用场景如下：在数据量较小（10万内的数据量）的结果集场景中，使用ORDER BY可以在内存中计算，没有任何使用...
RDS SQL Server常用视图
概述 本文要介绍RDS SQL Server在日常使用和维护时，常用的系统视图及相关查询语句。详细信息 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS...
访问MaxCompute数据源
背景信息 大数据计算服务MaxCompute是一种快速、完全托管的TB/PB级数据仓库解决方案。您可以通过AnalyticDB MySQL湖仓版（3.0）Spark SQL读写MaxCompute数据。前提条件 已创建湖仓版（3.0）集群。具体操作，请参见 创建湖仓版（3.0）集群。...
查询报错问题
查询报错 QUERY_EXCEED_LIMIT ErrMsg:groups 100000001 exceed limit=>10000000 用户在执行SQL查询用limit处理分页时，如果start值限制10000无法获取10000以后的数据，如：LIMIT 1000000,20。分析型数据库MySQL版对分页数量有限制，即查询...
实施步骤
本文主要介绍搭建DataV数据大屏的操作步骤。步骤一：购买DataV基础版 登录 DataV管理控制台，本教程使用 兼容MySQL 方式连接DLA服务，所以购买DataV基础版即可满足要求。步骤二：添加DLA数据源 在添加数据源之前，您必须先为您的DLA配置白...
外部表常见问题
解决措施 对于结构化数据，您可以设置以下参数调整单个Mapper读取数据量的大小，加速SQL执行。set odps.sql.mapper.split.size=256;调整每个Mapper读取Table数据的大小，单位是MB。对于非结构化数据，您需要查看OSS外部表路径下的OSS文件...
创建数据库
注意事项 2008 R2数据库最大数量为50，其他SQL Server实例的数据库数量受实例规格限制，详细计算公式如下：集群系列/高可用系列 即CPU核数开二次方后向下取整，再乘以50，假设获得值为X，最大数据库数量取X或300间的 最小值。例如：2016...
Beam排序优化（7.0版）
设置多维排序键时，排序键列的基数不宜过高，同时数据量越大时，多维排序的效果越明显。Beam组合排序键和多维排序键查询效果对比 以下是对数据量1 TB的SSB Benchmark中 lineorder_flat Beam表分别建立的组合排序键和多维排序键后，对比不同...
功能更新动态（2024年）
申请、续期和交还表权限 授权与回收表权限 数据源权限 具有数据源执行权限的用户支持创建或运行基于该数据源的数据库SQL任务和分析该任务。申请、续期和交还数据源权限 样式配置 支持页面水印设置功能，支持自定义页面水印内容及设置水印...
SQL洞察和审计
这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询结果，甚至查询超时。说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用...
SQL洞察和审计
这是因为SQL洞察记录所有数据库行为，会记录大量SQL语句，在线查询选择时间范围过大，会导致长时间没有返回查询结果，甚至查询超时。说明 您可以查询数据存储时长范围内，任意24小时的数据。如果需要查询更大时间范围的SQL记录，可以使用...
自建SQL Server通过物理网关迁移上云
本文介绍如何通过DTS控制台的物理网关迁移上云功能将ECS、IDC或其他云服务器中的自建SQL Server数据库迁移到RDS SQL Server。该功能采用物理网关协议的接入方式，具有速度快、操作简单、稳定性好、场景覆盖全等特点，能够有效提高迁移效率...
自建SQL Server通过物理网关迁移上云
本文介绍如何通过DTS控制台的物理网关迁移上云功能将ECS、IDC或其他云服务器中的自建SQL Server数据库迁移到RDS SQL Server。该功能采用物理网关协议的接入方式，具有速度快、操作简单、稳定性好、场景覆盖全等特点，能够有效提高迁移效率...
使用SSMS和BCP迁移SQL Server数据库
您也可以使用其他工具迁移数据库，本文以本地SQL Server数据库到阿里云云数据库SQL Server 2012的数据全量迁移为例，介绍了如何通过使用SQL Server Management Studio（SSMS）和大容量复制程序实用工具（BCP）来迁移SQL Server数据库。...
查询概述
在查询功能方面，不论是简单的单表过滤、排序、聚合操作，还是复杂的多表关联、子查询、窗口函数等，SelectDB都可以通过SQL轻松完成，极大地降低了使用成本。查询进阶 查询加速 为了提供极致的数据分析服务，SelectDB中采用了查询优化技术...
- 产品推荐
- 这些文档可能帮助您