开发ODPS SQL任务
编辑代码：进阶示例 更复杂的ODPS SQL任务示例如下：与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...
开发ODPS SQL任务
编辑代码：进阶示例 更复杂的ODPS SQL任务示例如下：与标准SQL的主要区别及解决方法 MaxCompute SQL中的关联操作 JSON数据从OSS迁移至MaxCompute 基于GitHub公开事件数据集的离线实时一体化实践 基于MaxCompute UDF将IPv4或IPv6地址转换为...
使用EMR
通过表格存储控制台获取SQL语句的方法如下：在实例的 数据湖投递 页面，单击投递任务 操作 列的 建表语句，可以查看和复制SQL语句，如下图所示。执行如下SQL语句，加载OSS数据源中实际的数据分区。其中lineitem为创建的外表名称。msck ...
读写分离简介
在对数据库有少量写请求，但有大量读请求的...使用方法 开始创建只读实例，详情请参见 创建SQL Server只读实例。开通读写分离连接，并配置只读地址的权重比，系统将根据已配置的权重比例处理读请求，详情请参见 开通读写分离（只读地址）。
Quick BI的数据源是SQL Server，使用SQL创建数据集...
使用SQL创建数据集报错“数据源执行SQL失败：INTERNAL:java.lang.RuntimeException:SQL execute error by datasource.com.microsoft.sqlserver.jdbc.SQLServerException: Incorrect syntax near the keyword 'ORDER'. ”的解决方法。...
错误代码
排查方法：检查分库分表规则，如果使用自定义规则的话，需要返回 int 值。如果检查分库分表没有问题，请确认是否已生效了数据库配置。ERROR 7002:Unable to find table rule 问题描述：无法找到表的规则，查看用户 SQL 中的表有没有在数据...
Persist plan and Query-Blocker
Persist plan功能支持在SQL参数化级别使Hints...说明 查询SQL Pattern的Sign值有以下两种方法：通过 PARAMETERIZE$sql，在返回结果中查看Sign值。通过 SELECT*FROM INFORMATION_SCHEMA.KEPLER_PERSIST_PLAN_SUMMARY，在返回结果中查看Sign值。
SQL查询常见错误排查
本文介绍使用SQL查询时的常见错误处理方法，主要包括OTSUnsupportOperation、OTSQuotaExhausted、OTSParameterInvalid和OtsRequestTimeout四种类型的错误。错误码 错误信息 描述 解决办法 OTSUnsupportOperation Operation not supported ...
SQL限流（rds_ccl）
待限流的SQL语句，使用$包裹 1,-仅限制主实例 3,-最多允许3条此类SQL并发执行 2,-最多允许2个此类SQL等待 true,-规则立即生效 'limit constant select',-规则描述 ''-使用默认的search_path);语法二：SELECT rds_add_ccl_rule_with_query_...
SQL限流（rds_ccl）
待限流的SQL语句，使用$包裹 1,-仅限制主实例 3,-最多允许3条此类SQL并发执行 2,-最多允许2个此类SQL等待 true,-规则立即生效 'limit constant select',-规则描述 ''-使用默认的search_path);语法二：SELECT rds_add_ccl_rule_with_query_...
SQL Workbench/J
SQL Workbench/J支持的环境，以及相关依赖的安装方法，请参见 官方手册。开通Hologres实例，详情请参见 购买Hologres。背景信息 SQL Workbench/J是一款免费的、跨平台的SQL查询分析工具，您可以使用SQL Workbench/J通过PostgreSQL驱动连接...
Spark SQL执行方式
AnalyticDB for MySQL 湖仓版（3.0）支持使用批处理和交互式两种方法执行Spark SQL，两种执行方式都直接与 AnalyticDB for MySQL 的元数据服务连通，可以读写 AnalyticDB for MySQL 的库表。本文介绍批处理和交互式两种执行方式的注意事项...
SQL Server只读实例简介
在对数据库有少量写请求，但有大量读请求的应用场景下，单个实例可能无法承受读取压力，甚至对业务产生影响。...使用方法 开始创建只读实例，详情请参见 创建SQL Server只读实例。说明 更多详情，请参见 SQL Server只读实例常见问题。
Java SDK常见问题
使用SQLTask执行SQL查询时，如果查询结果条数大于限制的10000条，该如何获取所有数据？SQLTask中，按照如下方法返回结果集的数据量是否有限制？如果有限制，最大返回结果集大小是多少？SQLTask查询数据和DownloadSession在使用及功能上，有...
Query洞察
SDK的SQL延迟高 排查方法：如果SDK的SQL延迟较高，可以通过Query洞察查看是否同一时间表有HQE的SQL抢锁，如下示例，一个SDK的SQL耗时18s，在 读写表信息 区域单击表锁分析。可查看到同一时间存在HQE的DML。HQE的DML是表锁，会导致SDK的...
Flag参数列表
CAST SQL Session/Project odps.sql.executionengine.enable.rand.time.seed 当参数值为False时，Rand函数使用当前InstanceId作为随机数初始化Seed，可以保证函数幂等。当Flag值为True时，Rand函数使用当前系统时间作为随机数初始化的Seed...
使用SSMS迁移上云
本文以Azure SQL Database为例，介绍如何使用SQL Server Management Studio（SSMS）将您本地自建或其他云的SQL Server数据库迁移到 RDS SQL Server。前提条件 已创建存储空间大于源库的目标 RDS SQL Server 实例，且 RDS SQL Server 实例需...
监控指标常见问题
通过监控指标发现未有明显的QPS或者RPS上涨，可以使用如下SQL命令从慢Query日志查询是否有新增的PQE SQL，导致CPU使用率上涨。如果存在PQE SQL，则需要优化SQL中走PQE引擎的算子，详情请参见 优化内部表的性能。查询最近3小时走PQE的query ...
数据类型版本说明
解决方法如下：将SQL拆分为单独的Session，将Session设置为1.0数据类型版本。将SQL改写为可以替代的功能。如果项目最开始使用了2.0数据类型版本，后面变更成1.0数据类型版本。需要注意以下2点：对于已经使用了2.0数据类型的表，读取数据时...
SETPROJECT
CAST SQL Session/Project odps.sql.executionengine.enable.rand.time.seed 当参数值为False时，Rand函数使用当前InstanceId作为随机数初始化Seed，可以保证函数幂等。当Flag值为True时，Rand函数使用当前系统时间作为随机数初始化的Seed...
使用说明
useProjectTimeZone use_project_time_zone 否 是否使用project的 odps.sql.timezone Property。取值说明：False（默认值）：不使用。True：使用。说明 Statement中也可以通过 set odps.sql.timezone=xxx 来指定，优先级顺序为Statement>...
SET
odps.sql.executionengine.enable.rand.time.seed 控制Rand函数使用系统时间或当前InstanceId作为随机数初始化Seed。True：Rand函数使用当前系统时间作为随机数初始化的Seed，但Rand函数不再幂等，不能作为Shuffle Key使用，会导致重跑的...
2.0版SQL开发规范
SQL优化核心方法是减少I/O 尽可能少的进行列扫描，返回最小数据量，减少I/O同时也减少内存开销。分布式计算，本地计算&并行计算 大数据计算情况下，本地计算时充分利用分布式多计算资源的能力，避免数据跨节点。高QPS，分区裁剪 业务系统...
Python SDK示例：SQL
设置读取结果为pandas DataFrame#直接使用 reader 的 to_pandas 方法 with o.execute_sql('select*from dual').open_reader(tunnel=True)as reader:#pd_df 类型为 pandas DataFrame pd_df=reader.to_pandas()设置读取速度（进程数）说明 多...
SQL窗口-关系型数据库
SQL窗口模块检测点 检测点 规则说明 基础配置项 规则集的基础配置，包括单次查询最大返回行数、结果集是否支持编辑、是否允许对敏感数据进行计算等。SQL执行数量规范 控制单次提交SQL的个数。DQL SQL规范 增加执行DQL SQL类型的限制。其他...
数据查询最佳实践
SQL优化核心方法是减少I/O 尽可能少的进行列扫描，返回最小数据量，减少I/O同时也减少内存开销。分布式计算，本地计算&并行计算 大数据计算情况下，本地计算时充分利用分布式多计算资源的能力，避免数据跨节点。高QPS，分区裁剪 业务系统...
SQL表达式
本文SQL示例中：处理自定义Topic数据SQL的SELECT语句 SELECT temperature as t,deviceName()as deviceName,location 中，temperature 和 loaction 来自于上报数据中的字段，deviceName()则使用了内置的SQL函数。处理上报属性Topic数据SQL的...
Quick BI SQL创建数据集无法执行MongoDB语句
问题描述 Quick BI SQL创建数据集无法执行...解决方案 Quick BI 数据集不能通过MongoDB的find()或findone()方法查询数据，需要使用SQL语句的方式查询数据，如下代码块所示。select 字段1，字段2 from tableName 适用于 Quick BI MongoDB
2020年
2020-11-19 SQL洞察和审计功能概览 RDS MySQL 相关SQL定位和识别 DAS的SQL请求行为识别支持通过机器学习方法进行聚类筛选，为您提供更快速、高效、精准的异常SQL定位服务。2020-11-05 SQL请求行为识别 2020年10月 引擎 功能名称 功能描述 ...
UDT概述
MaxCompute的UDT功能允许您在SQL中直接调用第三方语言的类使用其方法，或直接使用第三方对象获取其数据内容。UDT介绍 很多SQL引擎中UDT与MaxCompute的复杂类型STRUCT类似，相比之下，MaxCompute中的UDT与Create Type的概念更类似，Type中...
管理数据集
使用变量 若您在 变量编辑 对话框中已设置变量的默认值，则可以在新建SQL数据集中直接使用此变量。使用变量的格式为$变量名称$。代码示例如下：SELECT*FROM `example_table` WHERE region=$diyu$;若您在 变量编辑 对话框中未设置变量的默认...
SQL Console新交互模式下变更表数据和结构（公测中）
新交互模式的SQL Console基于原SQL Console进行了升级，升级后的SQL Console支持在执行SQL前备份数据、定时执行SQL、预估SQL执行耗时和异步执行SQL等功能。背景信息 DMS新交互模式的SQL Console，支持如下执行SQL的方式：直接执行：建议...
ePQ Hint Injection
本文介绍了 ePQ Hint Injection功能的简介、使用方法以及示例等内容。前提条件 ePQ Hint Injection依赖 pg_hint_plan 插件，您需要修改 shared_preload_libraries 参数，将 pg_hint_plan 添加到 shared_pre_load_libraries 参数值中。修改...
RDS SQL Server CPU使用率高问题
查看CPU使用情况 RDS管理控制台 提供多种查看CPU使用情况的方法：监控与报警 在控制台的 监控与报警 页面，单击 旧版监控 页签，在 资源监控 内，可以查看CPU使用率信息。自治服务 实例不能是RDS SQL Server 2008 R2云盘版。在控制台的 ...
通过SQL Server Management Studio导入SQL Server...
本文为您介绍通过SQL Server Management Studio将源云虚拟主机数据库中的数据导入目标云虚拟主机数据库的方法。前提条件 已安装SQL Server Management Studio工具。您可以前往 Microsoft官网，获取SQL Server Management Studio安装包。...
ePQ Hint Injection
本文介绍了 ePQ Hint Injection功能的简介、使用方法以及示例等内容。前提条件 ePQ Hint Injection依赖 pg_hint_plan 插件，您需要修改 shared_preload_libraries 参数，将 pg_hint_plan 添加到 shared_pre_load_libraries 参数值中。修改...
ePQ Hint Injection
本文介绍了 ePQ Hint Injection功能的简介、使用方法以及示例等内容。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.7.8.0及以上）PostgreSQL 11（内核小版本1.1.32及以上）说明 您可通过如下语句查看 ...
解决SQL Server实例空间满自动锁的问题
解决办法 查看空间使用状况 方法一：通过RDS管理控制台的监控页面查看空间使用情况，详情请参见 查看资源和引擎监控。参数说明如下。参数 说明 磁盘空间总体使用量 所有用户数据库的数据文件和日志文件的大小。数据空间使用量 所有用户数据...
如何限流慢SQL
限流具体的SQL，可以使用模板ID加关键字的方法，创建如下限流规则：CREATE CCL_RULE `KILL_CCL`/限流规则名称为KILL_CCL ON `analy_db`.`*`/匹配analy_db下的所有表上执行的SQL TO 'userxxxxxxxxx'@'%'/匹配来自userxxxxxxxxx用户的SQL FOR...
负载说明
操作系统说明：2.6内核的服务器操作系统为CentOS 6.8 64位 3.10内核的服务器操作系统为CentOS 7.4 64位 4.4内核的服务器操作系统为Ubuntu 16.04 64位 测试方法：在另一台服务器上部署MySQL流量程序，用于创建SQL并访问MySQL，同时开启40个...
- 产品推荐
- 这些文档可能帮助您