任务编排之电商打标

本文使用任务编排中的 单实例SQL赋值节点、条件分支节点 和单实例SQL节点,在数据库层面实现该需求。前提条件 您需要准备一个数据库,且拥有该数据库的变更权限。如需申请权限,请参见 DMS访问控制权限概述。环境准备 登录 数据管理DMS 5.0...

计划缓存(Auto Plan Cache)

loose_auto_plan_cache_count_threshold 当 loose_plan_cache_type 参数设置为 AUTO 时,满足缓存条件的SQL语句的执行计划缓存到Plan Cache中的次数阈值。取值范围:0~ULONG_MAX。默认值为512。说明 当缓存到Plan Cache中的次数阈值大于或...

其它操作

本文为您介绍使用MaxCompute SQL开发...ID=20150715113033121xxxxxxx UDF:0 Complexity:1.0 Input:0 Bytes 参数说明如下:UDF:表示SQL中运行的UDF个数。Complexity:表示SQL的复杂度,详情请参见 SQL复杂度。Input:表示SQL扫描的数据量。

COST SQL

计量预估,基于一条SQL作业的输入数据量...ID=20150715113033121xxxxxxx UDF:0 Complexity:1.0 Input:0 Bytes 参数说明如下:UDF:表示SQL中运行的UDF个数。Complexity:表示SQL的复杂度,详情请参见 SQL复杂度。Input:表示SQL扫描的数据量。

通过SQL条件过滤任务数据

前提条件 说明 新版控制台的操作步骤,请参见 通过SQL条件过滤任务数据。已启动任务配置,并处于 配置任务对象及高级配置 环节。关于如何启动任务配置,请参见 配置同步任务(新控制台)。功能限制 仅支持过滤当前表的字段,不支持跨表过滤...

SQL 编辑和执行

格式化 单击该按钮对选中 SQL 语句或当前 SQL 窗口中的所有 SQL 语句进行统一的格式化(缩进、换行和高亮关键字等操作)。IN 值转化 批量复制转化工具,适用于查询数据时对复制的行或列结果进行格式转化。将批量数据粘贴在 SQL 编辑区后...

SQL洞察

SQL洞察 功能可对SQL进行...GetFullRequestSampleByInstanceId 按照SQL ID查询数据库实例SQL洞察结果中的SQL样本数据,最大返回20条样本数据。GetDasSQLLogHotData 查询数据库实例7天内SQL洞察和审计的热存储数据明细。最佳实践 处理慢SQL问题

查看代码结构

DataWorks的代码结构功能,帮助您根据当前节点编写的SQL代码,解析出SQL代码运行的流程结构图。您可以通过代码结构快速定位、查看及修改SQL代码。查看代码结构 进入DataStudio。登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>...

SQL调优

本文为您介绍常见的SQL问题以及优化示例。并行度优化 并行度是衡量并行计算并行程度的一个指标,从执行计划上来看,例如ID为M1的任务,使用1000个Instance来执行,我们就说M1的并行度是 1000。需要注意的是:调整并行度不一定是越多越好,...

自动SQL限流

对于SQL模板限流,如果SQL中包含模板ID信息,会优先使用ID类信息,比如使用数据库中间件根据模板自动生成的SQL ID或者开发人员在SQL模板中添加的HINT信息。使用ID的优点是容易保证模板唯一,不会对其它模板的SQL造成影响,缺点是同样的SQL...

dbms_sql.delete_trace

语法 dbms_sql.delete_trace('<schema>','<query>')说明 执行该存储过程后,SQL语句中的常量会被自动模板化,并删除 mysql.sql_sharing 表中与其模板化后的SQL语句匹配的模板化SQL语句,且后续与该模板匹配的SQL语句不会被SQL Trace功能...

管理健康报告

SQL查询分析 该部分内容是对StarRocks执行的SQL语句的查询时间、CPU消耗以及内存消耗等维度进行排序,从而获取TOP SQL并展现相应的执行指标。您可以基于这些指标对潜在的性能问题进行优化。例如,可以从 慢SQL Top10 查看指定日期日执行...

dbms_sql.flush_trace

存储过程 dbms_sql.flush_trace 用于清理 information_schema.sql_sharing 系统表中的所有SQL Trace统计信息和跟踪记录。语法 dbms_sql.flush_trace()示例 清理 information_schema.sql_sharing 系统表中的所有SQL Trace统计信息和跟踪记录...

Quick BI自定义SQL创建数据集报错“SQL导入错误”

问题描述 Quick BI自定义SQL创建数据集报错“SQL导入错误”。问题原因 ODPS底层抛错:Decimal scale 38 out of range:[0,18]。解决方案 自定义的SQL语句有除法运算,需要设置一下小数位数(最多可以保留18位小数)。适用于 Quick BI

查询定时SQL结果数据

如果是将源Logstore中的数据通过定时SQL处理后存储到目标Logstore,请参见 从Logstore到Logstore。如果是将源Logstore中的数据通过定时SQL处理后存储到目标MetricStore中,请参见 从Logstore到MetricStore。如果是将源MetricStore中的数据...

简介

通过日志服务的实时分析能力,您可以获取当前数据库中的高代价SQL列表。例如执行以下查询:SELECT sql_code as"SQL模板ID",round(total_time*1.0/sum(total_time)over()*100,2)as"总体耗时比例(%)",execute_times as"执行次数",round(avg_...

动态 SQL

到目前为止,在 SPL 程序演示 SQL 命令都是静态 SQL:必须先知道完整的命令(变量除外)并将其编码到程序,然后程序本身才能开始执行。因此,通过使用动态 SQL,执行 SQL 可在程序运行时发生更改。此外,动态 SQL 是唯一可从 SPL ...

UDF(SQL自定义函数)

说明 当前Lambda表达式在MaxCompute中的应用注意事项请参见 Lambda函数。注意事项 使用SQL定义UDF时,您需要使用SQL脚本模式进行操作,普通SQL编辑模式可能会导致定义报错的问题。说明 MaxCompute的SQL脚本模式介绍及使用指导请参见 SQL...

定时SQL Exactly-Once

为同一个定时SQL任务中的不同实例生成递增的Sequence ID。重要 当您通过以下方式向同一个Logstore中的同一个Hash Key写入数据时,可能出现Sequence ID冲突,导致其中一方写入数据失败,引起数据缺失问题。通过API或SDK写入数据,并指定 ...

dbms_sql.delete_trace_by_sqlid

您可以使用 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除不需要SQL Trace跟踪的模板化SQL语句。也可以使用 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除不需要SQL Trace跟踪的模板化SQL语句。语法 dbms_sql.delete...

消费监控告警

命令设置消费限制,当Project中的标准SQL日累计消费超出限制时,任务执行会报错,报错信息如下。Exceed Cost Limit:{"AlreadyCost":"100.1","InstanceId":"xxx","Limit":"100","Project":"xxx","TaskType":"SQL","ThisTaskWillCost":"0",...

Quick BI隐藏后端接口查询SQL的方法

概述 Quick BI由于信息安全的需求,隐藏后端接口查询SQL的方法。详细信息 这个SQL是后端返回的查询SQL。独立部署4.3.1.1之后的版本可以配置关闭。适用于 Quick BI

dbms_sql.add_trace

语法 dbms_sql.add_trace('<schema>','<query>')说明 执行该存储过程后,SQL语句中的常量会被自动模板化,匹配该模板的SQL语句会被SQL Trace功能跟踪。参数说明 参数 说明 schema Schema名称。query 具体的SQL语句。注意事项 当在主节点...

SQL翻译

RDS PostgreSQL提供SQL翻译功能,支持将其他数据库引擎的SQL翻译成PostgreSQL的SQL,方便您使用RDS PostgreSQL。...在左边 来源数据库 的输入框输入的SQL语句。说明 单击右边 目标数据库 的输出框,将会自动显示翻译后的SQL

功能概览

在您需要监控和管理数据库实例执行的SQL语句时,可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和分析。开启该功能后会自动记录来自数据库内核的SQL语句,以及SQL语句的执行账号、IP地址、执行详情等信息,对实例性能没有影响。...

逻辑数仓

虚拟库 虚拟库类似于一般数据库中的Schema概念,用户需要在虚拟库下创建和管理视图。逻辑视图(Logical VIEW)类似于数据库普通视图,逻辑视图定义了数据的加工计算过程,不存放数据,仅存放定义。查询逻辑视图时,逻辑视图从源端提取数据...

API概览

不支持查询通过控制台手动导出的SQL洞察日志文件,只支持查询通过DescribeSQLLogRecords接口生成(请求参数Form取值为File)的SQL洞察文件列表。DescribeSQLCollectorRetention 查询RDS实例的SQL洞察日志保存时长 该接口用于查询RDS实例...

使用企业版功能

在您需要监控和管理数据库实例执行的SQL语句时,可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和分析。使用SQL洞察和审计功能需要开启DAS 企业版,本文介绍如何开启并使用DAS的 企业版。DAS 企业版 介绍 DAS 企业版 在基础版的...

物化视图自动查询改写

表达式补偿 对于查询SQL中的普通表达式和聚合函数表达式,如果整个表达式无法与物化视图SQL中的表达式直接匹配,则会尝试使用它的子表达式来查找匹配项。子表达式按自上而下的顺序进行尝试以获得最大的表达式匹配。示例如下:物化视图SQL的...

SQL数据类型映射

SQL中的BIGINT和数据表中的Integer均为64位整型。SQL中只有BIGINT、VARBINARY和VARCHAR数据类型支持作为主键列的数据类型。SQL中字段数据类型 数据表中字段数据类型 多元索引中的字段数据类型 BIGINT Integer Integer VARBINARY(主键)...

准备工作

步骤一:确认与获取 如果备份ECS实例中的数据库,需要为ECS实例安装阿里云云助手。ECS备份客户端需要和阿里云云助手配合使用。如果需要备份的ECS实例是2017年12月01日之前购买的,需要您自行安装云助手客户端。更多信息,请参见 安装云助手...

SQL Review

数据库自治服务DAS(Database Autonomy Service)提供SQL Review功能,本文介绍如何在 SQL洞察和审计 SQL洞察 功能进行 SQL Review。前提条件 已在DAS接入对应的数据库实例,并且接入状态显示为 连接正常。实例已开启SQL洞察和审计...

DBMS_SQL

显示结果如下:Number of rows processed:1 BIND_VARIABLE_CHAR 存储过程 BIND_VARIABLE_CHAR 将一个CHAR类型的值和SQL命令中的IN或IN OUT绑定变量相关联。BIND_VARIABLE_CHAR(c INTEGER,name VARCHAR2,value CHAR[,out_value_size INTEGER...

如何使用HINT(5.2及以下版本适用)

读写分离 由于RDS主实例与只读实例之间数据的同步存在着毫秒级别的延迟,如果在主库变更后需要马上读取变更的数据,则需要保证将读取数据的SQL下发到主实例。针对这种需求,PolarDB-X 1.0 提供了读写分离自定义HINT,指定将SQL下发到主...

读写分离

说明 此读写分离自定义HINT仅仅针对非事务中的SQL语句生效,如果SQL语句是写SQL或者SQL语句在事务中,那么还是会下发到RDS的主实例执行。PolarDB-X 1.0 针对/*+TDDL:slave()*/自定义HINT,会从只读实例中按照权重随机选取一个下发SQL语句...

2.0版SQL开发规范

示例SQL中的 and c1 is not null 为多余条件,优化后SQL如下:Select c1,c2 from tab1 where c1>100 and c1;多表关联 普通表join普通表,尽量包含分区列join条件,如果不包含则,尽量通过where条件过滤掉多余的数据。维度表join普通表,...

SQL防火墙

SQL Tautology攻击 这是最常见的SQL注入攻击方式,通过在WHERE条件中添加true表达式来绕过条件限制,例如:WHERE password='x' OR 'x'='x'。攻击者通常使用该技术来试探数据库的缺陷,SQL/Protect插件可以阻断任何使用true表达式的查询语句...

错误码

非法游标名 34000 非法游标名(INVALID CURSOR NAME)38 类:外部过程异常 38000 外部过程异常(EXTERNAL ROUTINE EXCEPTION)38001 不允许包含的SQL(CONTAINING SQL NOT PERMITTED)38002 不允许修改SQL数据(MODIFYING SQL DATA NOT ...

Presto SQL作业配置

presto<options>-f {SQL_SCRIPT} 说明 其中 SQL_SCRIPT 保存着作业编辑器填写的SQL语句。单击 确定。编辑作业内容。在 作业内容 ,填写提交该作业需要提供的命令行参数。示例如下。SELECT*from table1;单击 保存,作业内容编辑完成。...

功能特性

SQL结果集导出 数据库导出 SQL审核 支持对上传的SQL语句进行审核并提供优化建议,避免无索引或不规范的SQL语句影响线上服务,降低SQL注入风险。SQL审核 数据追踪 支持按需查找目标时间段内(数据库Binlog保存时长内)在DMS的SQL窗口对...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云原生数据仓库AnalyticDB MySQL版 云数据库HBase版 云数据库专属集群 云备份 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用