使用Spark SQL进行作业开发

选择 启动ThriftServer 时,SQL语句为交互式执行,资源隔离为线程级的,且需要配置Spark ThriftServer后才执行SQL语句。详情请参见 启停ThriftServer。使用 继续执行 的方式,在 spark_external_db 库中创建外表 spark_hudi_table,用于...

PlanCache

AnalyticDB MySQL 的PlanCache功能可以缓存SQL的执行计划,执行相同SQL Pattern语句时会使用缓存的执行计划,从而减少SQL的编译优化时间,提升系统的查询性能。本文介绍如何开启PlanCache功能以及PlanCache功能的使用示例。前提条件 ...

Hive

Zeppelin的Hive解释器是使用JDBC连接HiveServer2。本文为您介绍如何在Zeppelin中使用Hive。背景信息 EMR数据开发的Zeppelin在以下两方面做了增强:在多个EMR集群中动态切换。您无需配置,所有配置都是自动完成。Zeppelin的Hive解释器提供...

通过自治服务解决MySQL实例CPU使用率过高的问题

本文将介绍如何使用数据库自治服务DAS(Database Autonomy Service)(原CloudDBA)来定位系统中的慢SQL和其它异常SQL语句,您可通过自治服务提供的建议优化这些SQL语句,降低实例的CPU使用率以提升系统效率。问题描述 在使用云数据库RDS ...

SQL转换

ADAM的SQL转换工具可以将Oracle、Teradata、Db2语句转化为MySQL、PolarDB O引擎、云原生数据仓库 AnalyticDB PostgreSQL 版、RDS PostgreSQL、RDS PPAS、PolarDB-X语句。操作步骤 登录 数据管理DMS 5.0。在顶部菜单栏中,选择 集成与开发...

Spark SQL执行方式

SQL语句需要严格的资源隔离。需要处理较大规模的数据,例如使用SQL执行一次性的ETL。有复杂的第三方依赖包需要上传,且这些包可能需要反复测试和替换。特点 批处理方式提交的SQL运行在单独的Spark应用中,可以保证稳定性。支持通过SQL语句...

Presto

Zeppelin的Presto解释器是使用JDBC连接Presto。本文为您介绍如何在Zeppelin中使用Presto。背景信息 EMR数据开发的Zeppelin在以下两方面做了增强:在多个EMR集群中动态切换。无需配置,所有配置都是自动完成。Zeppelin的Presto解释器提供...

新建洞察分析

洞察分析可自动通过一系列AI算法对数据内容进行洞察分析,...自动生成的SQL语句会出现在临时查询的SQL语句输入框中,删除原有的SQL语句,只保留本次新生成的SQL语句。单击临时查询菜单栏的 图标,运行成功会生成需要的结果数据供用户查看。

SQL语句示例

使用数据问答中的SQL模板功能时,可参考此文档进行SQL语句编写。SQL语句编写入口 进入智能对话机器人空间产品界面后,选择 表格管理>SQL模板,单击新建干预按钮,即可在新建干预窗口编写SQL语句。说明 当机器人无法正确地将用户自然语言...

SQL 检查规范

用户在 SQL 窗口/创建数据库变更/创建表场景下执行 SQL 语句时,ODC 会根据配置的 SQL 检查规范检测 SQL 语句。本篇文档旨在介绍如何编辑和执行 SQL 检查规范。概念介绍 规则级别:是指某个 SQL-Check 规则的等级。规则级别划分为以下 3 类...

功能特性

精细化报表 综合分析报表 从SQL语句执行情况分析、会话连接分析、风险事件分析和SQL性能分析四个角度对数据库态势进行综合分析。性能分析报表 从性能变化趋势、性能最差的数据库/SID、耗时最久的SQL、性能最差的SQL、执行最多的SQL五个方面...

SQL Console新交互模式下变更表数据和结构(公测中)

新交互模式的SQL Console基于原SQL Console进行了升级,升级后的SQL Console支持在执行SQL前备份数据、定时执行SQL、预估SQL执行耗时和异步执行SQL等功能。背景信息 DMS新交互模式的SQL Console,支持如下执行SQL的方式:直接执行:建议...

RDS SQL Server常用视图

概述 本文要介绍RDS SQL Server在日常使用和维护时,常用的系统视图及相关查询语句。详细信息 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但不限于ECS、RDS...

SQL支持功能说明

本文介绍了表格存储SQL引擎对SQL语句的支持情况。重要 如果在使用过程中遇到问题,请加入钉钉群23307953(表格存储技术交流群-2)或36165029092(表格存储技术支持群-3)联系我们。SQL语句 描述 支持情况 CREATE TABLE 当数据表存在时,...

SQL搜索示例

本文为您介绍SQL搜索示例。示例1:搜索上海地域具有标签 business:online 的所有云服务器ECS实例。SQL语句如下:SELECT ResourceId,ResourceName WHERE ResourceType='ACS:ECS:Instance' AND RegionId='...

配置循环SQL节点

SQL预览:您可以在编写SQL代码的过程中,随时单击SQL预览,预览SQL代码。有效性检查:编写完SQL代码后,单击有效性检查,检查SQL代码的有效性。单击 试运行。如果执行日志的最后一行出现 status SUCCEEDED,表明任务试运行成功。如果执行...

Hive SQL作业配置

本文介绍如何配置Hive SQL类型的作业。前提条件 已创建好项目,详情...SQL语句示例。SQL语句最大不能超过64 KB。show databases;show tables;系统会自动为SELECT语句加上'limit 2000'的限制。select*from test1;单击 保存,作业内容编辑完成。

步骤一:创建SQL分析任务

本文介绍创建SQL分析任务的操作流程,以及SQL分析工作台的查询对象、SQL语句编写区域和操作栏的功能。前提条件 已购买物联网平台的企业版实例,具体操作,请参见 购买企业版实例。背景信息 您可以使用SQL分析工作台,配置SQL分析任务。更多...

AI生成SQL

AI生成SQL功能基于阿里云百炼提供的AIGC(人工智能生成内容)能力,可以根据您输入的直观的自然语言描述,自动生成SQL语句。您可以在资源中心的高级搜索中使用该功能,查询当前账号或跨账号的资源,提升您的搜索体验和效率。使用限制 每个...

函数说明

函数 polar_sql_id 用于计算SQL语句被模板化后的ID值,该ID值是由13位32进制字符组成的字符串,在SQL Trace中,通过该ID值来标识模板化后的SQL语句。语法 polar_sql_id('<query>')参数 参数名称 描述 query 具体的SQL语句。示例 计算SQL...

概述

无 循环SQL 可循环生成SQL语句,再将其分批提交给DMS管理的任意关系型数据库执行,同时,还可以搭配变量,控制SQL循环次数,达到简化SQL循环逻辑、平衡SQL语句对源库产生压力的目的。配置循环SQL节点 跨库Spark SQL 基于Spark引擎,实现大...

错误码

DTX-509 In READ_COMMITTED mode,complex query is not supported,you can use READ_UNCOMMITTED mode,sql:[%s]读已提交模式不支持复杂查询语句 修改 SQL 语句为简单查询语句,或者使用读未提交模式。DTX-510 Insert-select statement is ...

表结构说明

SQL_TRACE(DEMAND):跟踪特定的SQL语句。FIRST_LOAD_TIME SQL语句或执行计划第一次记录到内存中的时间。LAST_HIT_TIME 该SQL语句或执行计划最近一次被命中的时间。EXECUTIONS 执行模板化SQL语句的总次数。SUM_WAIT_TIME 执行SQL语句的等待...

SQL表达式

本文SQL示例中:处理自定义Topic数据SQL的SELECT语句 SELECT temperature as t,deviceName()as deviceName,location 中,temperature 和 loaction 来自于上报数据中的字段,deviceName()则使用了内置的SQL函数。处理上报属性Topic数据SQL的...

SQL

RDS的自治服务功能通过记录并分析高消耗的SQL语句,将聚合结果(慢SQL统计)和慢SQL明细展示在慢SQL统计页面,帮助您快速定位影响系统性能的SQL语句,简化调优流程。操作步骤 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在...

查询测试

ha3语句召回结果展示:SQL查询 查询测试下拉框选择【SQL查询】,输入查询语句,query 为必填项,输入语句点击【搜索】。kvpair 子句添加根据召回需求自行添加。sql语句召回结果展示:重要 字段类型为date、time、timestamp类型的字段,不可...

使用集群地址连接集群并执行AI SQL

本文介绍了使用PolarDB for AI时客户端如何连接集群,以及对SQL语句的要求。使用集群地址连接集群 使用 PolarDB for AI 功能时,不论您是 使用DMS连接集群,使用客户端连接集群,或是 使用命令行连接集群,都必须连接 PolarDB 的 集群地址...

计划缓存(Auto Plan Cache)

您可以使用 PolarDB MySQL版 提供的Auto Plan Cache功能,来缓存SQL语句的执行计划信息,以缩短查询优化时间,提升SQL语句的查询性能。本文介绍了Auto Plan Cache功能的背景信息、前提条件、依赖的参数和接口等内容。背景信息 执行计划的...

数据源管理

单击 图标,查看当前数据的查询SQL语句,您可以根据所需自定义编辑SQL查询语句。确认SQL语句无误后,单击 预览查询结果,查看查询结果。确认查询结果为所需后,单击 运行,即可将当前数据保存为当前SQL查询的结果。删除数据 选择任一数据,...

Spark-SQL命令行工具

提交离线SQL作业 spark-sql工具,提供-e 用于执行以分号隔开的多条sql语句,以及-f 用于执行sql文件中的语句(每条sql语句以分号结尾)。用户可将conf字段指定的配置放入 conf/spark-defaults.conf 中,然后按照如下格式提交:#使用-e命令...

如何处理RDS PostgreSQL实例连接数过多

选择 SQL操作>SQL窗口,执行以下SQL语句,检查当前连接数的限制。show max_connections;系统显示类似如下。执行以下SQL语句,查看当前连接数并记录将要结束的连接数PID。select*from pg_stat_activity;系统显示类似如下。执行以下SQL语句,...

云数据库PostgreSQL实例CPU使用率高的排查及解决办法

选择一条如下SQL语句执行,查看SQL的执行计划,第一条SQL语句不会实际执行SQL语句,第二条SQL语句会实际执行而且能得到详细的执行信息,对其中的Table Scan涉及的表,建立索引。explain[$Query_Text]explain(buffers true,analyze true,...

云数据库PostgreSQL实例CPU使用率高的排查及解决办法

选择一条如下SQL语句执行,查看SQL的执行计划,第一条SQL语句不会实际执行SQL语句,第二条SQL语句会实际执行而且能得到详细的执行信息,对其中的Table Scan涉及的表,建立索引。explain[$Query_Text]explain(buffers true,analyze true,...

RDS SQL Server CPU使用率高问题

SQL Hash 列的值是对SQL语句进行结构参数化之后的哈希值,用于标识在语句结构上完全相同的一类SQL语句,便于将SQL语句按照结构进行归类聚合统计,利用 SQL Hash 可以直接在系统视图 sys.dm_exec_query_stats 中基于query_hash列的值进行...

风险日志

本文介绍如何以时间、客户端IP、风险等级等语句检索条件,查询匹配的风险日志。背景信息 风险日志通过列表...详情包括每条语句的访问来源信息、应用身份信息、SQL语句信息、受影响对象、SQL语句SQL模板。单击 规则名称,可查看规则详情。

查询监控图和SQL列表介绍

AnalyticDB MySQL版 集群提供了SQL诊断功能,支持通过多种维度检索出符合条件的SQL查询(如慢查询),并将检索结果以图像化的方式展示,您还可以将检索结果下载保存到本地进行查看。本文介绍如何使用SQL诊断中的查询监控图和查询列表。查询...

SQL分析概述

操作步骤 步骤一:创建SQL分析任务 步骤二:编写SQL分析语句 步骤三:设置任务调度策略并发布 后续步骤 SQL分析任务发布后:您可以查看和运维SQL分析任务,了解SQL分析任务的调度情况。更多信息,请参见 可选:运维SQL分析任务。SQL分析...

RDS SQL Server中无法直接删除数据库的处理方法

问题描述 在RDS SQL Server实例中删除数据库时,会出现以下场景的报错:如果数据库没有会话,对于RDS SQL Server 2008、2012和2016版,是用镜像做的主备同步,直接使用 drop database SQL语句删除数据库会存在以下报错。The database 'XX' ...

SQL 条件过滤数据

本文为您介绍创建数据迁移或数据同步项目时,选择迁移或同步对象后通过 SQL 条件过滤数据的适用场景、使用限制和操作步骤。适用场景 创建数据迁移或数据同步项目时,您可以设置 SQL 过滤条件来过滤数据。完成设置后,只有满足过滤条件的...

如何判断RDS MySQL的审计记录SQL语句是否执行成功

概述 本文主要介绍如何判断RDS MySQL的审计记录SQL语句是否执行成功。详细信息 SQL审计出现了一条更新语句,但是实际数据没有更新。RDS MySQL的SQL审计是基于网络报文分析所得,并不是执行成功的SQL语句才会记录。如果需要具体的判断更新...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云服务器 ECS 轻量应用服务器 Web应用防火墙 负载均衡 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用