启停ThriftServer
如果执行SQL时，需要依赖JAR包，请先将JAR包上传至OSS的存储空间。如何上传文件，请参见 控制台上传文件。spark.jars 最大连接数 否 Spark维护的最大的Session数量，每个Session对应一个独立线程，配置过大可能引起OOM错误。spark.sql....
从Logstore到Logstore
执行SQL授权 您可以通过如下方式授予定时SQL任务读取源Logstore数据以及在当前Project下执行SQL分析操作的权限。默认角色：授权定时SQL任务使用阿里云系统角色AliyunLogETLRole执行对应操作。自定义角色：授权定时SQL任务使用自定义角色...
DescribeOasSQLPlans-查询 SQL 执行计划
根据 SQLID 查询诊断系统存储的 SQL 执行计划信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限...
通过Spark SQL读写C-Store表数据
在线读写数据时，需通过SET命令设置执行SQL语句的资源组，且资源组类型必须为Interactive型。离线读写数据 重要 离线读写数据需注意以下内容：不支持通过Spark SQL更新和删除C-Store表数据。查询热数据时，需先修改相关配置项再执行SQL语句...
在DMS中对数据库执行SQL时，出现“Row size too large...
问题描述 通过DMS控制台对RDS MySQL或自建MySQL数据库（ECS自建数据库或IDC自建数据库）执行SQL语句时，出现类似如下报错。Row size too large.The maximum row size for the used table type,not counting BLOBs,is 65535.This includes ...
使用SQL分析连接
MaxCompute控制台提供SQL分析，方便您快速执行SQL语句操作。本文为您介绍如何通过SQL分析使用MaxCompute服务。概述 您开通MaxCompute后，在控制台创建项目后即可直接通过SQL分析快速编辑并执行SQL。您可以通过SQL分析快捷使用MaxCompute...
并行查询性能
具体来说，在存储层仍然将数据分片到不同的线程上，多个线程并行计算，并可能分发到下一个阶段的并行Worker组中，最终并行计算结果汇总到Leader并返回给用户，大幅提升了并行执行能力。并行查询利用多核CPU的并行处理能力，以8核32 GB 独享...
日志字段
user 执行SQL的用户名。client_ip 访问 PolarDB-X 1.0 实例的客户端IP。client_port 访问 PolarDB-X 1.0 实例的客户端端口。sql 被执行的SQL语句。trace_id SQL执行的TRACE ID。如果是事务的话，会以TRACE ID加-作为前缀+数字表示，例如 ...
日志字段详情
user 执行SQL的用户名。client_ip 访问 PolarDB-X 1.0 实例的客户端IP。client_port 访问 PolarDB-X 1.0 实例的客户端端口。sql 被执行的SQL语句。trace_id SQL执行的TRACE ID。如果是事务的话，会以TRACE ID加-作为前缀+数字表示，例如 ...
从Logstore到MetricStore
执行SQL授权 您可以通过如下方式授予定时SQL任务读取源Logstore数据以及在当前Project下执行SQL分析操作的权限。默认角色：授权定时SQL任务使用阿里云系统角色AliyunLogETLRole执行对应操作。自定义角色：授权定时SQL任务使用自定义角色...
从MetricStore到MetricStore
执行SQL授权 您可以通过如下方式授予定时SQL任务读取源MetricStore数据以及在当前Project下执行SQL分析操作的权限。默认角色：授权定时SQL任务使用阿里云系统角色AliyunLogETLRole执行对应操作。重要 仅在首次配置时需要操作，且需要由目标...
锁阻塞
系统每10秒会对锁阻塞的情况进行一次采样，在系统进行采样的时间点，只要当一个会话执行SQL时间超过2秒、并且阻塞了其他会话的执行，就会被捕捉并统计到锁阻塞统计页面。操作步骤 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID。...
DescribeSQLLogsV2-查询SQL执行记录
1 OperationClass string 否 操作类别，取值如下：DQL DML DDL DCL TCL DQL OperationType string 否 执行 SQL 的类型。说明 如果设置了 OperationClass 参数，则 OperationType 的值必须属于对应的语言类型。例如 OperationClass 的值为 ...
如何自定义SQL超时时间
PolarDB-X 的一些查询类SQL语句，在计算节点发往存储节点执行时，执行超时时间默认是900秒（SOCKET_TIMEOUT）。但是对于某些特定的慢SQL，其执行时间可能超过了900秒。针对这种慢SQL，PolarDB-X 提供了调整超时时间的自定义HINT。通过这个...
查看统计图表
执行SQL授权 您可以通过如下方式授予定时SQL任务读取源Logstore数据以及在当前Project下执行SQL分析操作的权限。默认角色：授权定时SQL任务使用阿里云系统角色AliyunLogETLRole执行对应操作。自定义角色：授权定时SQL任务使用自定义角色...
羲和分析计算引擎
相对于同步执行，尽管增加了查询执行实现的复杂度，但是通过用户态的并行管理能力，提高了系统CPU的并行执行的效率。这是羲和分析计算引擎极致性能的基础能力。向量化执行模型 基于全异步的执行引擎之上，羲和采用了向量化的查询执行模型。...
SQL闪回
开启后，RDS BINLOG中会默认带上执行SQL的信息，增加一定的RDS存储空间。如您需要使用精确匹配的能力，建议升级 PolarDB-X 1.0 后开启，详情请参见 开启精确匹配。生成恢复文件 如果您之前未使用过SQL闪回功能，可以任选一条样例SQL，按照...
使用Spark SQL进行作业开发
选择 启动ThriftServer 时，SQL语句为交互式执行，资源隔离为线程级的，且需要配置Spark ThriftServer后才执行SQL语句。详情请参见 启停ThriftServer。使用 继续执行 的方式，在 test_spark_db 库中创建ODS层的无索引、有分区的表 adb_...
SQL闪回
开启SQL精确匹配开关后，Binlog中会默认带上执行SQL的信息，增加一定的存储空间。提供误操作SQL的TRACE_ID信息。模糊匹配 针对误操作SQL的相关信息（执行时间范围、操作表名、SQL类型等），在Binlog中匹配满足条件的事件，生成对应的恢复...
GetFullRequestSampleByInstanceId-按照SQL ID查询SQL...
0A74B755-98B7-59DB-8724-1321B394*Data object[]返回数据 Timestamp long 执行 SQL 的时间，格式为 Unix 时间戳，单位为毫秒。1660100753556 SqlId string SQL ID。651b56fe9418d48edb8fdf0980ec*Sql string SQL 样本。select*from testdb...
Spark SQL
代码中使用Spark SQL 您也可以在程序中执行SQL，操作元数据信息，以及读写表内容。下面以PySpark为例进行介绍，其他语言使用方式类似。首先，建立以下Python文件，保存为example.py，将文件上传至OSS。from pyspark.sql import ...
RDS SQL Server如何收缩事务日志
如果您的数据库服务器提示“事务日志已满”，此时无法通过控制台收缩事务日志，需要您手动执行SQL语句进行处理。收缩事务日志需要占用部分日志空间，所以当日志处于已满状态时只能按命令截断收缩。在数据库服务器上执行如执行以下SQL语句，...
通过Spark SQL读写Delta外表
Delta是一种可以基于OSS对象存储的数据湖表格式，支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版（3.0）和Delta表格式进行了整合，您可以通过Spark SQL读写Delta外表。本文主要介绍如何通过Spark SQL读写Delta外表。前提...
通过Spark SQL读写Hudi外表
Apache Hudi（简称Hudi）是基于OSS对象存储的一种表格式，支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版（3.0）和Hudi做了深度整合，您可以通过Spark SQL读写Hudi外表。本文主要介绍如何通过Spark SQL读写Hudi外表。前提...
数据管理的审计事件
ExecuteScript 执行SQL脚本。ExecuteStructSync 执行结构同步。GetApprovalDetail 获取工单审批详情。GetDatabase 获取具体库详情信息。GetDataCorrectBackupFiles 获取备份文件下载地址。GetDataCorrectOrderDetail 获取数据变更工单详情...
SQL 限制
GTS 事务目前支持 INSERT、UPDATE、DELETE 三类 DML 语法的部分功能，这些类型都是已经经过 GTS 产品组的严格验证。SQL 的支持范围还在不断扩大，...使用限制 不支持 SQL 嵌套 不支持多表复杂 SQL 不支持存储过程、触发器 不支持批量更新 SQL
将表格存储的增量数据转换为全量数据格式
常见问题 执行SQL语句进行 表格存储 数据格式转换时出现类型转换错误问题 问题现象 在DataWorks中通过数据开发执行SQL语句进行 表格存储 数据格式转换时出现如下错误：FAILED ODPS-0010000:System internal error-fuxi job failed,causer ...
Babelfish简介
基于Babelfish for PostgreSQL的开源项目，阿里云RDS PostgreSQL实例购买时开启Babelfish选项后，可以同时获得Microsoft SQL Server和PostgreSQL两种数据库引擎数据查询和处理的能力，从而使RDS PostgreSQL具备解析执行SQL Server T-SQL...
API概览
GetStructSyncExecSqlDetail 获取结构同步的执行SQL脚本 调用GetStructSyncExecSqlDetail获取结构同步的执行SQL脚本。SubmitStructSyncOrderApproval 提交结构同步工单至审批流程 调用SubmitStructSyncOrderApproval提交结构同步工单至审批...
计算费用（按量付费）
如果在MaxCompute下使用OTS和OSS相关服务，计费方式如下：执行SQL作业时，如果您通过外网、经典网络和VPC网络访问OTS（不包含STS方式访问），OTS会收取费用，详情请参见 OTS计费说明。执行SQL作业时，如果您通过外网访问OSS会收取流量费用...
慢日志
数据节点（DN）慢SQL：即物理慢SQL，PolarDB-X 发送到存储层节点的慢SQL，不支持优化操作。每个 PolarDB-X 节点最多保存30天慢日志，超过时间将会被自动删除。慢日志查看 登录 PolarDB分布式版控制台。在页面左上角选择目标实例所在地域。...
使用SQL管理外部项目
说明 对于某些特殊场景，需要在执行 SQL 时添加参数，例如：如果用户的orc 版本大于 orc135。则应设置如下参数：set odps.ext.oss.orc.native=true;打开Hive兼容模式后，MaxCompute才支持Hive指定的各种语法 set odps.sql.hive.compatible=...
慢 SQL 监控
数据访问代理中，慢 SQL 监控 是通过 阿里云日志服务 SLS 收集数据访问代理实例的 SQL 执行日志，将日志存储到用户空间中，在收集到 SQL 数据后，以图表的方式展示出收集到的 SQL 详情。其中，慢 SQL 是指执行耗时大于等于 500ms 的 SQL。...
简介
分布式关系型数据库 PolarDB-X 1.0 与日志服务联合推出SQL审计与分析功能，不仅支持历史SQL记录的审计，而且提供对SQL执行状况、性能指标、安全问题的实时诊断分析能力。您可以在 PolarDB-X 1.0 控制台，开通SQL审计与分析功能，进行实时...
并行查询和Hash Join的并行执行
更多关于并行查询和Hash Join的并行执行的文字说明，请参见 并行查询（Parallel Query）和 Hash Join的并行执行。
数据展示
单击 Run SQL，执行SQL语句查看数据和调试。设置并保存大盘面板。在右侧设置监控图表的名称、类型、展示样式等。单击右上角的 Apply。单击右上角的 图标，在 Save dashboard as.对话框，设置 Dashboard name 和大盘归属的 Folder 后，单击 ...
对接Grafana
单击 Run SQL，执行SQL语句查看数据和调试。设置并保存大盘面板。在右侧设置监控图表的名称、类型、展示样式等。单击右上角的 Apply。单击右上角的 图标，在 Save dashboard as.对话框，设置 Dashboard name 和大盘归属的 Folder 后，单击 ...
JDBC连接表格存储
执行SQL语句。您可以使用createStatement或者prepareStatement方法创建SQL语句。说明 当前支持的SQL语句请参见 SQL支持功能说明。使用createStatement创建SQL语句/设置SQL语句，此处以查询test_table表中id列和name列的数据为例介绍，请...
MySQL性能排查解析
在备库出现大事务导致延迟时，登录数据库，执行以下SQL语句，确认Seconds_Behind_Master不断变化，而Exec_Master_Log_Pos却保持不变，说明备库的SQL线程在执行一个大事务或者DDL操作，然后通过 show processlist 语句定位具体的线程。...
搜索（审计）
数据库自治服务DAS 提供搜索（审计）功能，查询并导出SQL语句对应的各种信息，本文介绍如何在SQL洞察和审计中使用搜索功能。重要 如果您开通了DAS企业版 V3，搜索功能将更名为审计功能。前提条件 已在DAS中接入对应的数据库实例，并且接入...
- 产品推荐
- 这些文档可能帮助您