时空数据库版本发布记录
Scene SQL 数据类型支持gateway方式，支持存储在OSS上的OSGB对象。ST_ComputeViewShed 性能优化。Importer SQL 导入工具支持以gateway的模式导入基于OSS的OSGB数据。缺陷修复 Raster SQL 修复 ST_InterpolateRaster 函数崩溃问题。修复...
时空数据库版本发布记录
Scene SQL 数据类型支持gateway方式，支持存储在OSS上的OSGB对象。ST_ComputeViewShed 性能优化。Importer SQL 导入工具支持以gateway的模式导入基于OSS的OSGB数据。缺陷修复 Raster SQL 修复 ST_InterpolateRaster 函数崩溃问题。修复...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
自动SQL限流
当数据库存在突发流量导致SQL并发量急剧上升、部分SQL占用大量数据库资源、或者大量未创建索引的SQL被调用等问题影响正常业务时，需要限制问题SQL的并发度，保障大部分的业务正常运转。数据库自治服务DAS支持自动SQL限流，会自动提取SQL...
功能发布记录（2023年）
2023.4.18 所有地域 所有DataWorks用户 SQL查询 大数据公共数据集上线 基于大数据AI公共数据集（淘宝、飞猪、阿里音乐、Github、TPC等），通过DataWorks与MaxCompute快速完成TB级别大数据分析。2023.4.11 所有地域 所有DataWorks用户 SQL...
API概览
GetFullRequestSampleByInstanceId 按照SQL ID查询SQL样本数据 调用GetFullRequestSampleByInstanceId接口，按照SQL ID查询数据库实例SQL洞察结果中的SQL样本数据，最大返回20条样本数据。企业版管理 API 标题 API概述 EnableDasPro 开启...
SQL洞察
SQL Review：对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP流量...
2022年
SQL Review功能对选定区间与基准区间内的数据库实例进行workload分析，并且对数据库实例中运行的SQL进行深度分析，展示数据库实例的索引优化建议、SQL改写建议、TOP SQL、新增SQL、失败SQL、SQL特征分析、执行变化SQL、性能恶化SQL和TOP...
按照SQL ID查询SQL样本数据
调用GetFullRequestSampleByInstanceId接口，按照SQL ID查询数据库实例SQL洞察结果中的SQL样本数据，最大返回20条样本数据。接口说明 SQL 洞察功能可对 SQL 进行健康情况诊断、性能问题排查，详情请参见 SQL 洞察。支持的数据库引擎请参见 ...
自建数据源Spark SQL
添加Spark SQL数据源用于连通Spark SQL数据库与Quick BI，连接成功后，您可以在Quick BI上进行数据的分析与展示。Quick BI支持以公网或阿里云VPC的方式连接Spark SQL数据库（3.1.2版本），本文为您介绍如何添加Spark SQL自建数据源。前提...
基础系列
具体设置，请参见 备份SQL Server数据。基于超大规模的阿里云飞天分布式存储，保证数据多副本的可靠性。成本 通过减少数据库节点，大幅节省成本，售价低至高可用系列的一半。功能 基础系列支持IP白名单、监控与报警、备份与恢复等基础功能...
DQL操作常见问题
说明 如果关闭 order by 必须带 limit 的限制，在单个执行节点有大量数据排序的情况下，资源消耗或处理时长等性能表现会受到影响。更多ORDER BY信息，请参见 ORDER BY全局排序（order_condition）。在执行MaxCompute SQL过程中，使用NOT IN...
自动SQL限流
SQL限流是限制数据库上执行SQL的并发度，通过限制问题SQL的并发度后，保障数据库正常响应业务请求，保障大部分的业务正常运转，即通过小部分业务受损，保障大部分业务正常运行。背景信息 随着技术的发展，尤其是云数据库的普及，数据库系统...
数据库导出
更多选项 单击 大数据导出选项 或 SQL脚本拓展选项，然后选中对应的导出选项。工单附件 您可以上传图片或文档对本次的导出操作进行补充说明。配置完成后单击 提交申请，等待审批完成。说明 您可以在工单详情页的 审批 区域查看审批进展。工...
SQL Server数据源
SQL Server数据源为您提供读取和写入SQL Server双向通道的功能，本文为您介绍DataWorks的SQL Server数据同步的能力支持情况。支持的版本 SQL Server Reader使用驱动版本是com.microsoft.sqlserver sqljdbc4 4.0，驱动能力具体请参见 官网...
RDS MySQL修改字符集（平滑方案）
由于业务需求，需要变更表的字符集（例如从gbk变更为utf8mb4），如果直接使用ALTER命令修改字符集会锁表，当数据表过大时，对业务的影响较大。本文介绍的操作方法需要先在目标实例中创建表结构信息（新字符集），再通过DTS将源实例的数据...
新建数据库SQL任务
不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建数据表质量规则。查询结果不支持全量下载，仅支持下载样例数据。离线计算模板节点类型不支持数据库SQL。在Dev-Prod模式的项目下使用仅配置了生产...
新建数据库SQL任务
不支持基于MySQL、Oracle数据源SQL数据更新触发调度数据源质量规则。更新信息，请参见 创建全域数据表质量规则。查询结果不支持全量下载，仅支持下载样例数据。离线计算模板节点类型不支持数据库SQL。在Dev-Prod模式的项目下使用仅配置了...
RDS SQL Server云数据库的磁盘空间被占满
您可参考本文操作解决RDS SQL Server数据库的磁盘空间被占满的情况。说明 阿里云提醒您：如果您对实例或数据有修改、变更等风险操作，务必注意实例的容灾、容错能力，确保数据安全。如果您对实例（包括但不限于ECS、RDS）等进行配置与数据...
深度检测
功能说明 您可以通过深度检测功能，检测数据库实例如下指标是否异常：数据库空间使用情况 阻塞死锁数量 慢SQL数据 平均活跃会话 数据库日志增长方式 操作步骤 登录 DAS控制台。在左侧导航栏中，单击 实例监控。找到目标实例，单击实例ID，...
COST SQL
计量预估，基于一条SQL作业的输入数据量大小、UDF个数以及SQL复杂等级估算作业执行费用。需要注意的是，如果UDF涉及分区裁剪，由于无法确定最终会扫描多少个分区，该场景下的费用无法预估。使用限制 目前外部表不支持Cost SQL功能。注意...
其它操作
计量预估 基于一条SQL作业的输入数据量大小、UDF个数以及SQL复杂等级估算作业执行费用。需要注意的是，如果UDF涉及分区裁剪，由于无法确定最终会扫描多少个分区，该场景下的费用无法预估。说明 该信息不能作为实际计费标准，仅供参考，实际...
SQL Review
SQL Review功能提供全局SQL负载分析能力（包括SQL样本、平均执行耗时，耗时比例，执行次数比例，平均扫描行数，总执行次数，首次出现时间等内容的分析），辅助用户快速定位到数据库实例中的可疑SQL（资源消耗过大、趋势变化过大、性能恶化...
SQL闪回
获取误操作SQL数据中的 sql_time、table_name、sql_type 和 trace_id 字段。精确匹配与模糊匹配 SQL闪回根据您提供的误操作SQL信息，在Binlog中查找对应的匹配事件，反向生成对应的恢复SQL。受实例版本、参数设置的影响，SQL闪回支持两种...
慢 SQL 监控
数据访问代理中，慢 SQL 监控 是通过 阿里云日志服务 SLS 收集数据访问代理实例的 SQL 执行日志，将日志存储到用户空间中，在收集到 SQL 数据后，以图表的方式展示出收集到的 SQL 详情。其中，慢 SQL 是指执行耗时大于等于 500ms 的 SQL。...
SQL闪回
获取误操作SQL数据中的 sql_time、table_name、sql_type 和 trace_id 字段。开启精确匹配 前提条件：您的 PolarDB-X 1.0 实例版本需为5.3.4-15378085及以上，如果低于该版本，建议升级后开启。登录 PolarDB分布式版控制台，前往指定实例的...
排序优化和执行
本文介绍 PolarDB-X 如何优化和执行排序计算，达到减少数据传输量和提高执行效率的效果。基本概念 排序操作（Sort）表示按照指定的ORDER BY列对输入进行排序。本文介绍的均为不下推的排序类算子的实现。如果已被下推到LogicalView中，则由...
设置列索引的排序键
列存索引数据排序与DDL排序的区别 列存索引数据排序的本质是按照指定键组合进行排序，类似于其他普通二级索引DDL排序过程，但两者也有不同之处，具体区别如下：列存索引排序不使用索引列作为排序键，而是可以指定任意组合的排序键。...
查询账单
当 产品明细 为 DAS企业版 时，表示使用DAS企业版 V1和企业版 V0：在 计费项 为 SQL数据量 的消费明细中，查看SQL洞察和审计占用的存储空间及计费情况。在 计费项 为 版本 的消费明细中，查看DAS专业版的包年包月费用。当 产品明细 为 数据...
SQL查询介绍
常见问题 使用SQL查询数据时如何选择查询方式 SQL查询常见错误排查 使用SQL查询数据时报错The sql scanned rows of main table exceeds the quota,main table rows quota is 100000 相关文档 如果要加速SQL数据查询和计算，您可以通过创建...
查询监控图和SQL列表介绍
用户可以根据返回数据大小进行排序，找到返回数据量较大的查询。用户名 客户端建立连接时使用的用户名。在 诊断与优化 页面，单击 连接信息，查看用户名和用户连接数。资源组 执行SQL的资源组名称。无 峰值内存 查询消耗的峰值内存。...
数据分析概述
功能概述 SQL查询 SQL查询是使用标准的SQL语句，来查询和分析存储在MaxCompute中的大数据，详情请参见 SQL查询。您可以通过编写SQL语句，对有查询权限的数据源进行快速的数据查询与分析操作，详情请参见 功能概览。DataWorks SQL查询提供了...
OCS与数据库结合使用示例
if(value=null){/在OCS缓存里没有命中/step 1：从My SQL数据库中查询/Load MySQL Driver Class.forName(JDBC_DRIVER);con=DriverManager.getConnection(DB_URL,DB_USER,DB_PASS);ps=con.prepareStatement(sql);ResultSet result=ps....
错误代码
设法消除分布式查询中的跨库JOIN，数据重排序等耗时操作，降低数据合并阶段的消耗。如果优化后的SQL语句仍然执行较慢，可以使用下面的Hint语法临时设置 PolarDB-X 1.0 的超时时间：/*TDDL:SOCKET_TIMEOUT=900000*/SELECT*FROM dual;其中 ...
SET
某些UDF在内存计算、排序的数据量比较大时，会报内存溢出错误，这时候可以调大该参数，但该方法只能暂时缓解，您需要从业务上去优化UDF代码。取值范围：256 MB~12288 MB。默认值为1024 MB。odps.sql.udf.timeout 设置UDF超时时间。取值范围...
Flag参数列表
部分UDF在内存计算、排序的数据量比较大时，会报内存溢出错误，这时候可以调大该参数，但该方法只能暂时缓解，您需要从业务上去优化UDF代码。取值范围：256 MiB~12288 MiB。默认值为1024 MiB。UDF SQL Session odps.sql.udf.timeout 设置...
ADAM概览
同时针对数据冗余、信息安全问题，对采集结果中的SQL数据进行脱敏、去重、一致性校验等处理，保证采集结果的准确性。更多信息，请参见 数据库采集。应用采集器：收集、分析Oracle、Db2和Teradarta的Java应用框架与运行信息，包含应用机器...
RDS for SQL Server如何回收表空间
MySQL表的空间是独立的一个文件，所以收缩MySQL的大表，可以收缩整体数据库的大小，但是SQL Server所有的表都是在数据库的文件里，只有收缩文件才可以缩小空间。因为MySQL表的空间是独立的一个文件，如果收缩MySQL的大表，会相应收缩整体...
列存表使用排序键和粗糙集索引加速查询
如何选择排序键和排序方式 当您的查询SQL经常包含某一个列或者某几个列的等值或者范围限定条件查询时，比如时间列等，可以考虑使用这些列作为排序键，从而利用数据排序并结合粗糙索引，加速这类SQL的查询速度。一般情况下建议使用组合排序...
SETPROJECT
部分UDF在内存计算、排序的数据量比较大时，会报内存溢出错误，这时候可以调大该参数，但该方法只能暂时缓解，您需要从业务上去优化UDF代码。取值范围：256 MiB~12288 MiB。默认值为1024 MiB。UDF SQL Session odps.sql.udf.timeout 设置...
- 产品推荐
- 这些文档可能帮助您