使用Spark SQL进行作业开发

重要 选择 继续执行 时,SQL语句为批量执行SQL语句运行在单独的Spark App中,可以保证资源隔离和稳定性。本次入门教程推荐使用 继续执行。选择 启动ThriftServer 时,SQL语句为交互式执行,资源隔离为线程级的,且需要配置Spark ...

使用Spark SQL进行作业开发

重要 选择 继续执行 时,SQL语句为批量执行SQL语句运行在单独的Spark App中,可以保证资源隔离和稳定性。本次入门教程推荐使用 继续执行。选择 启动ThriftServer 时,SQL语句为交互式执行,资源隔离为线程级的,且需要配置Spark ...

SQL 路由

本文介绍在分库分表场景中数据访问代理执行 SQL 语句时的路由原理以及数据合并。有关数据访问代理的数据拆分原理,请参考文档 分库分表。拆分键 分库分表过程中,数据访问代理按照指定的拆分键,采用特定的算法进行计算,然后根据计算结果...

SQL 窗口规范

用户在 SQL 窗口中执行 SQL 语句时,ODC 会根据配置的 SQL 窗口规范检查 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 窗口规范。原理介绍 执行流程 ODC 系统管理员按照 ODC 提供的配置模板启用 SQL 审核集成、设置访问外部 SQL 审核系统...

Spark SQL执行方式

执行SQL语句时,在弹窗中选择 继续执行。交互式执行 注意事项 交互式执行的DDL和DML语句的执行结果仅返回最多1000行数据。使用交互执行方式执行的DDL语句,只返回执行成功或者失败,不返回数据。例如执行 CREATE TABLE 语句,只提示成功或...

SQL 检查规范

用户在 SQL 窗口/创建数据库变更/创建表场景下执行 SQL 语句时,ODC 会根据配置的 SQL 检查规范检测 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 检查规范。概念介绍 规则级别:是指某个 SQL-Check 规则的等级。规则级别划分为以下 3 类...

DescribeDiagnosisRecords-查询诊断记录

1 RcHost string 执行 SQL 语句的 AnalyticDB MySQL 前端节点 IP 和端口信息。10.0.xx.xx:3004 ScanSize long 扫描数据量,单位:Byte。9 ProcessId string 查询 ID。2021093000414401000000023503151*StartTime long SQL 语句的执行开始...

通过自治服务解决MySQL实例CPU使用率过高的问题

本文将介绍如何使用数据库自治服务DAS(Database Autonomy Service)(原CloudDBA)来定位系统中的慢SQL和其它异常SQL语句,您可通过自治服务提供的建议优化这些SQL语句,降低实例的CPU使用率以提升系统效率。问题描述 在使用云数据库RDS ...

表结构说明

Schema_name 执行SQL语句所在的Schema的名称。Type 该记录被哪些功能引用。Digest_text 模板化后的SQL语句。Plan_id 执行计划ID。Plan 执行计划。Version 该记录在系统内部的版本号。Create_time 该记录的插入时间。Update_time 该记录的...

通过控制台使用SQL查询

执行SQL语句时,请选中一条所需SQL语句,否则系统默认执行第一条SQL语句。执行SQL语句时,一次只能选中一条SQL语句,否则系统会报错。步骤二:查询数据 创建映射表后,在 SQL查询 页签,执行SELECT语句查询所需数据。更多信息,请参见 查询...

在DMS中执行SQL语句后出现“禁止未知SQL执行”报错

问题描述 在使用DMS控制台时,执行SQL语句后,执行结果出现以下报错。自定义安全规则:禁止未知SQL执行 问题原因 DMS控制台的安全规则中,默认未配置相关SQL语句允许执行,因此执行相关SQL语句时,会被拒绝执行。解决方案 阿里云提醒您:...

SQL Console

单击运行后,开始执行SQL语句,运行结果展现在编辑框底部。说明 不选中则默认运行编辑框中所有语句。重新加载 刷新SQL编辑框的内容。SQL编辑框只保留已保存的语句。停止 停止正在运行的SQL语句。运行日志 查看SQL语句的运行情况。例如,SQL...

SQL Console

单击运行后,开始执行SQL语句,运行结果展现在编辑框底部。说明 不选中则默认运行编辑框中所有语句。5 停止运行 停止正在运行的SQL语句。6 重新加载 刷新SQL编辑框的内容。SQL编辑框只保留已保存的语句。7 运行日志 查看SQL语句的运行情况...

数据库返回“Incorrect string value”报错

问题描述 在DMS控制台中对RDS MySQL实例或自建MySQL数据库(ECS自建数据库或IDC自建数据库)执行SQL语句时,出现类似如下报错。Incorrect string value 问题原因 数据写入或数据查询时的数据字符集和表的字符集不兼容。解决方案 一般拷贝的...

云数据库RDS PostgreSQL版中执行SQL语句时出现“ERROR...

问题描述 阿里云云数据库RDS PostgreSQL版中执行SQL语句时出现以下错误:ERROR:temporary file size exceeds temp_file_limit(8388608kb)问题原因 SQL查询生成的临时表较大,超过了系统中临时表空间上限(temp_file_limit)。解决方案 查看...

Dataphin中SQL语句执行

概述 本文主要介绍如何定位Dataphin执行SQL语句慢。详细信息 SQL查询慢可能存在下列几种情况。1.在select时可以列举实际需要字段来代替*进行查询。2.将where后可以过滤掉大量数据的条件提前。3.避免在where后使用表达式操作。dataphin底层...

超级SQL模式

开启超级SQL模式后,管理员和DBA在SQL Console中执行SQL语句,将不受安全规则的限制。例如禁止在SQL Console中执行DELETE语句、禁止在SQL Console中执行CREATE_INDEX语句等安全规则限制。前提条件 系统角色为管理员或DBA,关于用户角色信息...

dbms_sql.delete_trace_by_sqlid

您可以使用 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除不需要SQL Trace跟踪的模板化SQL语句。也可以使用 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除不需要SQL Trace跟踪的模板化SQL语句。语法 dbms_sql.delete...

SQL性能分析

执行SQL语句时,如果出现慢SQL或SQL占用系统内存的情况,需进行具体查询分析。查询慢SQL 查询慢SQL语句分为以下两种情况:查看历史慢SQL语句:通过观察 pg_stat_statements 视图,执行时间较长的SQL语句。SELECT total_time/calls AS avg,...

SQL性能分析

执行SQL语句时,如果出现慢SQL或SQL占用系统内存的情况,需进行具体查询分析。查询慢SQL 查询慢SQL语句分为以下两种情况:查看历史慢SQL语句:通过观察 pg_stat_statements 视图,执行时间较长的SQL语句。SELECT total_time/calls AS avg,...

读写分离

对于/*+TDDL:slave()*/,如果一个主RDS实例存在多个只读实例,那么 PolarDB-X 1.0 会根据所分配的权重随机选择一个只读实例执行SQL语句。注意事项 PolarDB-X 1.0 自定义HINT支持/*+TDDL:hint_command*/和/!TDDL:hint_command*/两种格式。...

配置循环SQL节点

背景信息 任务编排的单实例SQL节点,仅可在数据库中单次执行SQL语句,不适用需要循环执行重复逻辑的场景,如:删除冗余的数据库表、SaaS用户更新大量表等场景。循环SQL节点适用于循环执行重复逻辑的场景。例如:删除数据库表中冗余的数据。...

功能特性

语句分析类报表 从SQL语句分析、失败语句分析、SQL语句变化趋势、审计趋势分析和执行次数最多SQL模板分析5个维度分析和展示当前语句类的信息。会话分析类报表 包含新增会话分析、失败会话分析、并发会话分析和会话数量变化趋势分析4张报表...

开启会话与事务

它代表了一段时间内的交互会话,包括建立连接、执行SQL语句等操作。前提条件 数据库的类型为 RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL版、云数据库OceanBase MySQL模式 或 RDS PostgreSQL。实例具有自由操作或稳定变更能力。注意事项...

ExecuteSQLQuery-使用SQL查询当前账号的资源

请求参数 名称 类型 必填 描述 示例值 Expression string 是 待执行 SQL 语句。待执行 SQL 语句长度小于 2000 个字符。关于 SQL 语法的更多信息,请参见 SQL 基本语法。SELECT*FROM resources LIMIT 100;Scope string 否 搜索的范围。取值...

并行操作

Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划,并将执行任务分配到多个CPU上以提升性能。适用场景 SQL语句并行执行非常适合在大量的raster对象中过滤出符合空间范围...

并行操作

Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划,并将执行任务分配到多个CPU上以提升性能。适用场景 SQL语句并行执行非常适合在大量的raster对象中过滤出符合空间范围...

并行操作

Ganos支持并行执行SQL语句和并行操作raster对象。并行执行SQL语句 原理 PostgreSQL支持利用多个CPU生成并行的查询计划,并将执行任务分配到多个CPU上以提升性能。适用场景 SQL语句并行执行非常适合在大量的raster对象中过滤出符合空间范围...

SQL

方法名称 方法说明 execute_sql()/run_sql()执行SQL语句。open_reader()读取SQL执行结果。说明 在MaxCompute客户端中可以执行的SQL语句并非都可以通过入口对象的 execute_sql()和 run_sql()方法执行。在调用非DDL或非DML语句时,请使用其他...

Data Lake Analytics节点

单击工具栏中的 图标,执行SQL语句。如果您需要修改在 数据开发 页面测试时使用的任务执行资源,请单击工具栏中的 图标,选择相应的独享调度资源组。说明 因为访问专有网络环境的数据源需要使用独享调度资源组执行任务,所以此处必须选择...

如何使用HINT(5.2及以下版本适用)

TDDL:SLAVE*/这个自定义HINT,如果一个主RDS实例存在多个只读实例,那么 PolarDB-X 1.0 会根据所分配的权重随机选择一个只读实例执行SQL语句。示例 指定SQL在主实例上执行:/!TDDL:MASTER*/SELECT*FROM table_name;在SQL语句前添加/!TDDL:...

创建EMR Hive节点

您可以创建EMR(E-MapReduce)HIVE节点,通过类SQL语句协助读写、管理存储在分布式存储系统上的大数据集的数据仓库,完成海量日志数据的分析和开发工作。前提条件 数据开发(DataStudio)中已创建业务流程。数据开发(DataStudio)基于业务...

创建EMR Impala节点

集群类型 高级参数 DataLake集群(新版数据湖)【EMR on ECS】、Custom集群(自定义集群)【EMR on ECS】“FLOW_SKIP_SQL_ANALYZE”:SQL语句执行方式。取值如下:true:表示每次执行多条SQL语句。false:表示每次执行一条SQL语句。...

结果编辑与导出

背景信息 在 ODC SQL 窗口中编辑和执行 SQL 语句后,用户可以在结果页签中查看、编辑和导出执行结果。编辑结果集 示例:在结果集页签中,插入数据到数据库 odc_test 下的表 employee 中。信息项 示例值 项目名称 odc_4.2.0 数据库名称 odc_...

SQL Console页面执行SQL语句超时中断解决方案

问题描述 在数据管理DMS的SQL Console页面执行SQL语句时,出现执行超时问题,执行结果页面提示以下信息。[语句1]:select count(*)from table_name where gmt_create>='2020-01-01';失败,详情:操作终止(用户中断或执行超时)【解决方法】:...

创建EMR Spark SQL节点

Spark【EMR ON ACK】“FLOW_SKIP_SQL_ANALYZE”表示SQL语句执行方式。取值如下:true:表示每次执行多条SQL语句。false:表示每次执行一条SQL语句。您可 自定义SPARK参数,但需要使用完整参数名称,例如:“spark.executor.instances”:20...

设置黑名单规则

用户自定义SQL参数化模式:该模式支持将您在数据库中执行SQL语句中的所有变量进行参数化处理,并生成参数化模板记录到数据库中。当执行符合参数化模板的SQL语句时,Proxy会进行拦截。用户自定义具体SQL模式:该模式支持对您指定的具体的...

通过MySQL协议访问实例

try(Connection connection=DriverManager.getConnection(url,properties)){ try(Statement statement=connection.createStatement()){/使用execute方法执行SQL语句。本示例以SHOW DATABASES为例,您也可以换成其它SQL语句。statement....

常见问题概览

数据库没有数据Owner时如何处理 数据变更 SQLConsole页面执行SQL语句超时中断解决方案 DMS控制台中执行数据变更任务时提示“Duplicate column name 'XXXXX'”使用新版DMS控制台进行变更时提示“Duplicate entry:XXXX”数据库返回“Row size...

云数据库PostgreSQL实例CPU使用率高的排查及解决办法

选择一条如下SQL语句执行,查看SQL的执行计划,第一条SQL语句不会实际执行SQL语句,第二条SQL语句会实际执行而且能得到详细的执行信息,对其中的Table Scan涉及的表,建立索引。explain[$Query_Text]explain(buffers true,analyze true,...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
批量计算 云原生数据仓库AnalyticDB MySQL版 云备份 弹性公网IP 短信服务 人工智能平台 PAI
新人特惠 爆款特惠 最新活动 免费试用