Spark SQL执行方式
隔开的多个SQL语句时，Spark引擎只会执行最后一行SQL。ThriftServer引擎启动需要一定时间，如果出现启动时失败可以等待一定时间重试。适用场景 临时进行数据计算，无需返回所有数据。需要执行大量的DDL语句。希望在提交DQL语句后，可以立即...
SQL脚本
是否由系统添加Create Table语句 选中 是否由系统添加Create Table语句 复选框，则 SQL脚本 的最后一行SQL语句必须为Select语句，PAI会自动创建一个临时表，用来存储Select语句查询的结果。取消选中 是否由系统添加Create Table语句 复选框...
云数据库PostgreSQL实例CPU使用率高的排查及解决办法
选择一条如下SQL语句执行，查看SQL的执行计划，第一条SQL语句不会实际执行SQL语句，第二条SQL语句会实际执行而且能得到详细的执行信息，对其中的Table Scan涉及的表，建立索引。explain[$Query_Text]explain(buffers true,analyze true,...
SQL请求行为识别
说明 第一行显示 cpu_usage 相关度接近1.0，说明SQL模板所在的类别与 cpu_usage 关联度最高，即该 SQL指标 与 异常指标 的关联度最高。下表是SQL监控指标的参数说明表。监控指标参数 参数说明 聚合图像 每一个聚类图像下的指标会做聚合。...
执行大事务SQL语句时出现“max_binlog_cache_size”...
您可以将复杂的SQL语句进行拆分，将SQL的影响行数降低，然后分批进行提交，控制SQL语句产生的Binlog日志大小：您可以在SQL语句后加上limit参数，例如在SQL语句后面添加 limit 1000 参数，限制SQL语句影响的行数。一个数据变更可以提交多个...
Presto
示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换database，第二句运行Select语句。注释 以-开头的均为SQL注释。参数功能 Zeppelin支持${var=value} 形式的参数。var是变量名，value是默认值。例如，通常不...
特殊用法
预期第一次更新2行,第二次更新1行 FOR i in SQL%BULK_ROWCOUNT.first.SQL%BULK_ROWCOUNT.last LOOP RAISE NOTICE '%',SQL%BULK_ROWCOUNT(i);END LOOP;END;结果显示如下：NOTICE:2 NOTICE:1 DO 正常情况下，FORALL 语句会在循环执行的SQL...
Hive
示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换执行引擎，第二句运行Select语句。注释 以-开头的均为SQL注释。参数功能 Zeppelin支持${var=value} 形式的差数。var是变量名，value是默认值。例如，通常不...
SQL其他常见问题
如果运行SQL，Filename文件的第一行是 SQL 表示已经进入SQL模式。命令示例如下。SQL select.from table_name where xxx;如果只运行一个SQL语句，您可以使用MaxCompute SQL中的 sqltext 方法，命令示例如下。odpscmd-e"select*from dual;您...
DBMS_SQL
EXECUTE_AND_FETCH(c[,exact])函数 INTEGER 执行一个游标并获取一行。FETCH_ROWS(c)函数 INTEGER 从游标中获取的行数。IS_OPEN(c)函数 BOOLEAN 查看游标是否打开。LAST_ROW_COUNT 函数 INTEGER 返回获取的累计行数。OPEN_CURSOR 函数 ...
SQL Detail
前提条件 PolarDB 集群版本需满足如下条件之一：PolarDB MySQL版 8.0.1版本且修订版本为8.0.1.1.31及以上。PolarDB MySQL版 8.0.2版本且修订版本为8.0.2.2.12及以上。您可以通过 查询版本号 来确认集群版本。参数说明 您可以在控制台上设置...
物化视图自动查询改写
当查询SQL包含多个子查询时：如果查询的主查询或某一个子查询被改写后，自动查询改写还会继续重复上述规则，尝试对剩余部分进行改写。UNION、EXCEPT、INTERSECT 如果查询SQL与物化视图SQL都包含UNION、EXCEPT、INTERSECT，UNION、INTERSECT...
管理日志
示例1：返回所有的错误日志 EXEC sp_rds_read_error_logs-示例2：从第0行开始返回包含关键字error的错误日志的第1行数据 EXEC sp_rds_read_error_logs 0,1,'error' 使用存储过程 sp_readerrorlog 读取错误日志，适用于SQL Server 2017及...
SelectObject
当某一行数据因为不匹配SQL中期望的类型、或者某一列或者多列数据缺失且SkipPartialDataRecord为True时，该行数据会被跳过。如果跳过的行数超过该参数的值，OSS会停止处理并报错。说明 如果某一行是非法CSV行，例如在一列中间连续含有奇数...
赋值节点
echo '取上游sql节点输出第1行第2个字段'${sql_inputs[0][1]};echo '取上游sql节点输出第2行第3个字段'${sql_inputs[1][2]};单击页面右侧的 调度配置，配置 节点上下文 中的 本节点输入参数。将fuzhi_sql节点的 outputs 参数添加为本节点...
概述
第一次创建新规则时，只对新建立的连接生效。修改规则后，5秒后可以对之前的连接生效。使用指定模式创建的黑白名单SQL语句，在创建时不会被拦截，只有在创建成功后才会进行拦截。暂不支持对同一账号和Endpoint同时启用黑名单和白名单两个...
性能洞察
说明 例如SQL维度中排名第一的SQL值为0.75，表示在给定时间段内，该SQL语句的平均会话是0.75次。性能洞察支持7个维度的AAS分类，您可以通过右侧的 AAS分类 下拉框来切换。类别 说明 SQL 业务TOP 10 SQL的AAS变化趋势。Waits 活跃会话资源...
基于Python DB-API的应用开发
with connection.cursor()as statement:#创建表 sql_create_table="create table if not exists test_python(c1 integer,c2 integer,primary key(c1))"print(sql_create_table)statement.execute(sql_create_table)#插入一行数据 sql_...
UDF（SQL自定义函数）
背景信息 功能介绍 SQL语言定义函数作为一种用户自定义函数（UDF），弥补了MaxCompute只能用Java或Python创建UDF的不足，还扩展了UDF入参的参数类型，可支持函数类型的入参参数，提升表达业务逻辑的灵活性。您可以通过该函数实现简单功能，...
性能洞察
说明 例如SQL维度中排名第一的SQL值为0.75，表示在给定时间段内，该SQL语句的平均会话是0.75次。性能洞察支持7个维度的AAS分类，您可以通过右侧的 AAS分类 下拉框来切换。类别 说明 SQL 业务TOP 10 SQL的AAS变化趋势。Waits 活跃会话资源...
元数据库和数据字典
PHYSICAL_EXEC_COUNT：平均物理执行次数 MAX_PHYSICAL_EXEC_COUNT：最大物理执行次数 SUM_PHYSICAL_FETCH_ROWS：总物理拉取行数 AVG_PHYSICAL_FETCH_ROWS：平均物理拉取行数 MAX_PHYSICAL_FETCH_ROWS：最大物理拉取行数 FIRST_SEEN：第一次...
如何修改SQL查询语句输出结果的行数
日志服务SQL查询语句默认只输出前100行内容，本文主要介绍如何修改SQL查询语句输出结果的行数。在执行查询分析语句时，日志服务默认会在查询分析语句结尾追加 limit 100，您可以使用LIMIT语法修改返回结果行数，具体操作请参见 LIMIT语法。
步骤三：设置任务调度策略并发布
事务表 使用 主键覆盖：每次产出数据时，如果数据中主键的数据重复，则只保留一份数据。主键 自动显示自定义存储表的主键字段。调度策略生效日期 调度SQL分析任务的时间范围。调度周期 调度SQL分析任务的频率，可选：小时：SQL分析任务上线...
基于Python的应用开发
python(c1 integer,c2 integer,primary key(c1))"print(sql_create_table)statement.execute(sql_create_table)#插入一行数据 sql_upsert="upsert into test_python(c1,c2)values(1,1)"print(sql_upsert)statement.execute(sql_upsert)#...
如何限流慢SQL
在数据库会话或者慢日志中发现大量慢SQL，大量占用数据库资源，同时活跃会话数、CPU使用率、IOPS、内存使用率等监控指标一项或者多项处于高位。分析后发现这些慢SQL不属于核心业务，是优化不足的烂SQL，为保障核心业务的稳定运行，此时我们...
时间窗口SQL脚本
是否由系统添加Create Table语句 选中该复选框，则SQL脚本的最后一行SQL语句必须为Select语句，PAI会自动创建一个临时表，用来存储Select语句查询的结果。不选中该复选框，您需要自己在SQL语句中创建数据表${o1}，作为向下游传递的数据表。...
基本语句
如果 STRICT 没有在 INTO 子句中被指定，那么 target 将被设置为该查询返回的第一个行，或者在该查询不返回行时设置为空（注意除非使用了 ORDER BY，否则“第一行”的界定并不清楚）。第一行之后的任何结果行都会被抛弃。你可以检查特殊的 ...
API概览
不支持查询通过控制台手动导出的SQL洞察日志文件，只支持查询通过DescribeSQLLogRecords接口生成（请求参数Form取值为File）的SQL洞察文件列表。DescribeSQLCollectorRetention 查询RDS实例的SQL洞察日志保存时长 该接口用于查询RDS实例的...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
质量规则参数配置
统计值（重复行数/重复率）重复行数用于检查数据中重复了的行数的多少，仅计算多出来的行数，算法为总行数-去重行数。重复率=重复行数/总行数。如果需要重复数据的全部行数/重复率计算，可以使用唯一值校验模板的异常行数/异常率指标。及时...
使用说明
慢SQL是否要优化：不是所有的慢SQL都需要第一优先级优化，您需要快速知道数据库上哪些SQL最消耗资源，优化这些SQL，才可提高实例的稳定性。全量请求 可对SQL进行以下诊断：性能问题排查：诊断SQL的健康情况、TOP SQL的资源消耗、执行次数、...
SQL 审计
当前请求分析主要为您提供 SQL 审计的查询功能，本页面为您介绍具体的操作的步骤。背景信息 SQL 审计功能支持根据执行...说明 目前最多支持 100 条审计记录下载，如果查询记录数超过 100 行，下载时会按照页面排序顺序只下载前 100 行记录。
配置行列自动分流
自动分流方案说明 PolarDB MySQL版 的数据库代理功能支持将 SQL语句的预估执行代价 作为判断指标，通过判断预估执行代价是否会超过特定阈值（该阈值可配置），决定将该SQL请求分流到行存或是列存节点上处理，从而发挥出行存和列存的最佳...
SQL
alias.py','test_alias_res1'])table=o.create_table('test_table',schema=Schema.from_lists(['size'],['bigint']),if_not_exists=True)data=[[1,],]#写入一行数据，只包含一个值1。o.write_table(table,0,[table.new_record(it)for it in...
动态 SQL
当使用 INTO 子句时，只能在结果集中刚好返回一行，否则会发生异常。当使用 USING 子句时，expression 的值将传递给占位符。占位符通过可使用变量的 sql_expression 嵌入在 SQL 命令中。占位符可由带有冒号前缀(:)的标识符(:name)表示。求...
Python SDK示例：SQL
alias.py','test_alias_res1'])table=o.create_table('test_table',schema=Schema.from_lists(['size'],['bigint']),if_not_exists=True)data=[[1,],]#写入一行数据，只包含一个值1 o.write_table(table,0,[table.new_record(it)for it in ...
SQL组件概述
组件是一种带有多个输入参数和输出参数的SQL代码过程模板，而SQL代码过程可通过引入一个或多个源数据表，并进行过滤、连接、聚合等操作，加工出业务所需的目标表，因此，您可通过组件快速加工出符合业务需求的目标表。本文为您介绍组件的...
普通模式和Hive兼容模式下SQL的差异
结果是true GE（>=）当输入参数是DOUBLE类型的时候，普通模式下对相等的检查更加宽松，如果两个输入参数足够接近，就认为它们相等这会导致即使第1个输入参数小于第2个参数，但是只要他们足够接近，GE的返回结果也可能是 true。示例如下。...
结果编辑与导出
回到开始 跳转至第 1 页。上一页 向上翻页。下一页 向下翻页。跳至底部 跳转至最后一页。搜索 在搜索框中输入关键字查询所需结果。下载数据 导出查询结果。列管理 筛选在页面中展示的列。列模式 以表格的形式展示一行选中的数据。在 列模式...
一般SQL优化方法
在SQL语句中可以使用SQL优化，如添加索引、选择合适数据类型、避免使用 SELECT*、使用临时表暂存中间结果等方法，提高查询性能和简化数据库操作。优化能力 控制IN条件或OR条件的条目数量，过多的条目会导致RCA优化时间加长。尽量避免在...
- 产品推荐
- 这些文档可能帮助您