使用说明
另外，数据访问代理连接器提供了拦截器，当您在工程代码中指定分库分表后，在 SQL 语句执行前自动拼接路由 HINT 语句。当您在脚本中定义以下字段后：RouteParameters routeParameters=RouteCondition.newRouteParameters();routeParameters...
日志分析
SQL累计查询行数 您可以使用如下命令查询SELECT语句累计查询的行数：and sql_type:Select|SELECT sum(affect_rows)SQL类型分布 您可以使用如下命令查询SQL类型的分布情况：|SELECT sql_type,count(sql)as times GROUP BY sql_type SQL独立...
日志分析
SQL累计查询行数 您可以使用如下命令查询Select语句累计查询的行数：and sql_type:Select|SELECT sum(affect_rows)SQL类型分布 您可以使用如下命令查询SQL类型分布：|SELECT sql_type,count(sql)as times GROUP BY sql_type SQL独立用户IP...
JDBC 连接池配置示例
（分号）拼接在一起，作为一个 SQL 发给 server 端。useLocalSessionState：建议设置为 TRUE，避免交易频繁向 OB 数据库发送 session 变量查询 SQL。session变量主要为：autocommit，read_only 和 transaction isolation。socketTimeout：...
SQL优化技术
数据库上执行的SQL千差万别，且伴随着业务快速迭代、数据分布特征变化、热点变化、数据库版本升级等持续动态变化，这些都使得SQL优化如同三餐般不可或缺。挑战 如何利用综合手段实现快速准确的问题定位？例如问题SQL，仅仅从慢日志中分析是...
简介
分布式关系型数据库 PolarDB-X 1.0 与日志服务联合推出SQL审计与分析功能，不仅支持历史SQL记录的审计，而且提供对SQL执行状况、性能指标、安全问题的实时诊断分析能力。您可以在 PolarDB-X 1.0 控制台，开通SQL审计与分析功能，进行实时...
简介
rows,arbitrary(sql)as sql FROM log GROUP BY sql_code)ORDER BY"总体耗时比例(%)"desc limit 10 如上图所示，查询结果中包括SQL模板的ID、该模板SQL占总体SQL的耗时比例、执行次数、平均执行时间、平均影响行数以及样例SQL等信息。...
新建SPARK_SQL任务
本文为您介绍如何基于Dataphin构建Spark SQL任务类型的离线计算任务。前提条件 项目的Hadoop计算源的Spark SQL服务配置已开启Spark SQL任务。更多信息，请参见 创建Hadoop计算源。操作步骤 在Dataphin首页，单击顶部菜单栏中的 研发。默认...
创建数据集
变量（可选）变量用于在仪表盘展示时，通过动态传入变量值替换数据集中SQL引用的变量，达到筛选数据的目的。根据如下步骤新增变量：在 变量 区域，单击 图标。在 新增变量 对话框中，输入变量名称、别名。在 值类型 下拉类表中，选择值的...
查看代码结构
DataWorks的代码结构功能，帮助您根据当前节点编写的SQL代码，解析出SQL代码运行的流程结构图。您可以通过代码结构快速定位、查看及修改SQL代码。查看代码结构 进入DataStudio。登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>...
SparkSQL自适应执行
阿里云E-MapReduce 3.13.0及后续版本的SparkSQL支持自适应执行功能，可以用来解决Reduce个数的动态调整、数据倾斜和执行计划的动态优化问题。使用限制 本文针对SparkSQL自适应执行涉及到的参数适用于Spark 2.x。如果您使用的是Spark 3.x，...
开发ODPS SQL任务
DataWorks为您提供ODPS SQL节点，可用于周期性调度MaxCompute的SQL任务，并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...
开发ODPS SQL任务
DataWorks为您提供ODPS SQL节点，可用于周期性调度MaxCompute的SQL任务，并完成与其他类型节点的集成和联合调度。MaxCompute SQL任务采用类似SQL的语法，适用于海量数据（TB级）但实时性要求不高的分布式处理场景。本文为您介绍在DataWorks...
SQL
PyODPS支持对MaxCompute SQL的基本操作，本文为您介绍如何在PyODPS中使用SQL。背景信息 PyODPS提供对MaxCompute SQL的基本操作方法，方法如下所示。方法名称 方法说明 execute_sql()/run_sql()执行SQL语句。open_reader()读取SQL执行结果。...
使用SQL查询时序数据
创建时序表并建立SQL映射关系后，您可以通过控制台、SDK等不同方式使用SQL查询时序数据。时序表的SQL映射关系 根据每个时间线每个时刻对应一个值或者多个值，时序模型分为“单值模型”和“多值模型”。对于同一个时序表，您可以建立三种SQL...
租户参数列表说明
sql_throttle_priority SQL 优先级阈值，SQL 优先级低于此的 SQL 将不会被执行。ob_plan_cache_evict_high_percentage 触发计划缓存逐出的计划缓存限制的内存使用百分比。explicit_defaults_for_timestamp 指定 timestamp 数据类型在处理...
Python SDK示例：SQL
from odps import options options.sql.settings={'odps.sql.mapper.split.size':16} o.execute_sql('select*from pyodps_iris')#会根据全局配置添加hints 读取SQL执行结果 运行SQL的Instance能够直接执行 open_reader 操作读取SQL执行结果...
使用方法
aliyun-sql插件是基于Apache Calcite开发的部署在服务端的SQL解析插件，使用此插件您可以像使用普通数据库一样使用SQL语句查询Elasticsearch中的数据，从而极大地降低您学习和使用Elasticsearch的成本。背景信息 与开源的SQL插件相比，...
CREATE TABLE LIKE
如果SQL语句中有较多单引号，可以将$符号置于SQL语句前后，通过$query_sql$改写（推荐使用该用法，操作更简便）自动实现单引号转义，用法如下：CALL HG_CREATE_TABLE_LIKE('table_name',$query_sql$[,'partition_clause'])old_table_name：...
步骤二：编写SQL分析语句
{bizDate}：SQL任务的调度时间点，实际执行任务时会被动态替换。格式为13位的毫秒级时间戳，例如1699286400000。取值范围是SQL任务 调度策略生效日期 内的时间。current_timestamp()：当前TIMESTAMP类型的时间戳。使用${bizDate} 的原因：...
错误码
非法游标状态 24000 非法游标状态（INVALID CURSOR STATE）25 类：非法事务状态 25000 非法事务状态（INVALID TRANSACTION STATE）25001 活跃的SQL状态（ACTIVE SQL TRANSACTION）25002 分支事务已经激活（BRANCH TRANSACTION ALREADY ...
2022年
本章节介绍云数据库专属集群MyBase的产品功能和对应的文档动态。2022年7月 引擎 类别 功能名称 功能描述 发布时间 相关文档 SQL Server 新增 3D集群画像 MyBase SQL Server引擎支持3D集群画像功能。07-20 集群画像 SQL Server 优化 存储...
2021年
本章节介绍云数据库专属集群MyBase的产品功能和对应的文档动态。2021年12月 引擎 类别 功能名称 功能描述 发布时间 相关文档 SQL Server 新增 迁移实例 将专属集群MyBase上的主、备实例迁移到当前可用区的其它主机上。12-23 迁移实例 迁移 ...
SQL Server节点
DataWorks的SQL Server节点可进行SQL Server任务的开发和周期性调度，以及与其他作业的集成操作。本文为您介绍使用SQL Server节点进行任务开发的主要流程。背景信息 SQL Server是用于存储和处理数据的关系型数据库管理系统（RDBMS），为您...
配置SQL赋值节点
SQL赋值节点可以将SELECT语句读取的数据赋值给该节点的输出变量，输出变量可以在下一节点中作为输入变量被使用。本文介绍配置SQL赋值节点的方法。背景信息 SQL赋值节点赋予任务流获取表中数据作为下游节点的变量的能力。变量在任务节点中的...
Presto
背景信息 EMR数据开发的Zeppelin在以下两方面做了增强：在多个EMR集群中动态切换。无需配置，所有配置都是自动完成。Zeppelin的Presto解释器提供以下主要功能：支持任何Presto SQL语句（包括DDL和DML等）。支持多行SQL，每条SQL语句以分号;...
Hive
背景信息 EMR数据开发的Zeppelin在以下两方面做了增强：在多个EMR集群中动态切换。您无需配置，所有配置都是自动完成。Zeppelin的Hive解释器提供以下主要功能：支持任何Hive SQL语句（包括DDL和DML等）。Hive解释器与Beeline支持的语言及...
测试工具
本文介绍RDS SQL Server性能测试工具HammerDB以及如何下载安装HammerDB。HammerDB简介 HammerDB是一个开源的数据库负载测试和基准工具，包含Linux和Windows版本，可以测试运行在任意的数据库系统上。HammerDB具有自动化的，多线程和动态...
MapReduce支持SQL运行时执行模式
MaxCompute新增支持将MapReduce作业指定为SQL运行时（Runtime）执行模式，基于SQL运行时，MapReduce作业可以应用SQL引擎的各种新特性，实现之前不支持的功能。本文为您介绍如何将MapReduce作业指定为SQL运行时执行模式。背景信息 ...
数据库高级特性管理
如果用户的业务数据分布不均匀，或者执行了大量的删除或更新操作但更新量不足20%，或者出现其他SQL Server内置自动更新统计信息无法覆盖的场景时，您可以通过该功能来提升查询性能。说明 SQL Server默认会启用自动更新统计信息的机制，但在...
Spark
SQL（%spark.sql）以%spark.sql 开头的就是Spark SQL的段落（Paragraph）。您可以运行所有Spark支持的SQL语句，通过Zeppelin可视化展示，如下图所示：Zeppelin的Spark SQL解释器和其他Spark解释器（PySpark、SparkR和Spark解释器）共享...
自然语言到SQL语言转义（基于大语言模型的NL2SQL）
为了让不熟悉SQL语言的用户能方便地从数据库中取数分析，PolarDB for AI推出自研的基于大语言模型的自然语言到数据库查询语言转义（Large Language Model based Nature Language to SQL，简称LLM-based NL2SQL）解决方案，PolarDB for AI会...
ADAM概览
应用动态改造 应用画像：针对单个应用进行多维度分析，输出应用画像分析报告，包括对应用的软件栈、系统信息、对象详情、SQL和调用栈等的评估分析。应用评估：快速梳理、指导数据库异构迁移过程中的应用改造内容。实时收集待迁移应用的数据...
开启SQL日志审计
SQL日志审计功能默认关闭，您可以在 PolarDB-X 1.0 控制台上手动开启。默认情况下，只对开启SQL日志审计功能之后产生的日志数据进行审计分析，您也可以导入部分历史数据。前提条件 登录 日志服务控制台，根据提示，开通阿里云日志服务。已...
开启SQL日志审计
SQL日志审计功能默认关闭，您可以在 PolarDB-X 1.0 控制台上手动开启。默认情况下，只对开启SQL日志审计功能之后产生的日志数据进行审计分析，您也可以导入部分历史数据。前提条件 登录 日志服务控制台，根据提示，开通阿里云日志服务。已...
SQL搜索处理
json","search_info":{},"trace":[],"sql_result":{"data":[],"column_name":[],"column_type":[]},"error_info":{"ErrorCode":8010,"Error":"call sql plan service failed.","Message":"failed to get sql plan,error message is[IQUAN_...
2023年
本章节介绍了数据库自治服务DAS的产品动态和对应的文档。2023年12月 引擎 功能名称 功能描述 发布时间 相关文档 MongoDB 空间分析 MongoDB 实例支持在空间分析中回收空间碎片。2023-12-22 空间分析 MongoDB 诊断报告 诊断报告功能支持 ...
SQL搜索处理
以上URL 中拼接的所有查询参数，请查看下方“查询参数”的参数定义、使用方式及样例。请求协议 HTTP 请求方式 GET 支持格式 JSON 签名机制 可用以下方法计算签名（authorization）参数 类型 描述 accessUserName String 用户名，可在 实例...
Spark SQL、Dataset和DataFrame基础操作
本文为您介绍Spark SQL、Dataset和DataFrame相关的概念，以及Spark SQL的基础操作。Spark SQL、Dataset和DataFrame介绍 Spark SQL是一个用于结构化数据处理的Spark模块，与基本的Spark RDD的API不同，Spark SQL的接口还提供了更多关于数据...
通过Flink SQL模式配置ETL任务
Flink SQL是ETL为了简化计算模型、降低使用门槛而设计的一套符合标准SQL语义的开发语言。相对于DAG模式（可视化拖拽方式），Flink SQL的功能更为强大，您可在Flink SQL的命令窗口中输入DAG模式暂不支持的语法。本文将介绍如何通过Flink SQL...
- 产品推荐
- 这些文档可能帮助您