Spark SQL

SparkSQL作业的文本框,支持直接写SQL语句,每条SQL语句以分号隔开。SQL语句支持下列类型命令:SET命令 用于指定Spark的设置,一般置于整个SQL语句的最前面。每条Set命令指定一个Spark参数的值,每条SET命令用分号隔开。SET命令的Key和...

开启会话与事务

在DMS的SQL Console页面开启会话(Session)后,同一SQL Console页签下执行的所有SQL将在一个Session执行。背景信息 会话(Session)是指客户端与数据库服务器之间建立的连接和交互的过程。它代表了一段时间内的交互会话,包括建立连接...

日志备份时报:The transaction log for database xx ...

如果 tempdb 数据库总空间小于5 GB,或没有条件重启数据库实例:基础系列实例,请登录数据库执行如下SQL语句:说明 当 tempdb 数据库总空间小于5 GB时,收缩事务日志需要按命令截断日志链收缩;此操作会影响备份恢复到这个时间点,但影响...

SQL 审计

查看查询结果:您可在查询结果查看如下信息:SQL 语句数据库、用户、客户端 IP、操作类型、请求时间、执行耗时(ms)、扫描行数 和 更新行数。下载查询结果,单击 导出,下载查询结果列表。说明 目前最多支持 1000 审计记录下载,...

OCS与数据库结合使用示例

} }/end of for 在这段代码中我们可以看到,我们给这条SQL语句标记了一个key,当有用户要执行这条SQL的时候,我们首先按照key在OCS缓存查找:如果没有对应的缓存数据,则连接MySQL数据库执行SQL查询,把结果返回给用户,并把这个查询结果...

数据库管理

数据库Database)是表、索引、视图、存储过程、操作符的集合。您可以在一个 AnalyticDB PostgreSQL 实例创建多个数据库,但是客户端程序一次只能连接上并且访问一个数据库,无法跨数据库进行查询。创建数据库 使用 CREATE DATABASE ...

数据源管理

在 已有数据集 页签,选择需要添加的数据库下的空间表后,单击 添加到项目。说明 您也可以在 SQL查询 页签,通过自定义SQL语句查询所需数据。在数据源页签下查看已添加的数据。查看数据引用图层 选择任数据,单击 图标,查看当前数据的...

Presto

支持多行SQL,每条SQL语句以分号;结尾。支持注释功能。支持并发执行多条SQL。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示,在一个段落里执行2句SQL语句(以分号间隔),第句切换database,第二句运行Select语句。注释 ...

dbms_sql.delete_trace_by_sqlid

您可以使用 dbms_sql.delete_trace 存储过程根据具体的SQL语句来删除需要SQL Trace跟踪的模板化SQL语句。也可以使用 dbms_sql.delete_trace_by_sqlid 存储过程根据SQL ID来删除需要SQL Trace跟踪的模板化SQL语句。语法 dbms_sql.delete...

SQL

SQL任务类型,用于连接数据库并执行相应SQL。本文为您介绍创建SQL类型任务时涉及的参数,并提供了SQL任务的示例。参数说明 参数 说明 节点名称 任务的名称。一个工作流定义的节点名称是唯一的。运行标志 正常(默认):运行工作流时执行...

删除数据库

您可以通过SQL命令或RDS管理控制台删除数据库,但每种方式适合的实例类型不同,请根据实际情况,选择删除方式。通过控制台删除数据库 访问 RDS实例列表,在上方选择地域,然后单击目标实例ID。在左侧导航栏单击 数据库管理。找到要删除的...

SQL 路由

在分分表模式下,数据访问代理会根据拆分键(即拆分字段)以及 SQL 语义把 SQL 语句分发到底层各个存储数据的分表进行执行。执行结束后,数据访问代理会将从各个分表获取的数据合并,然后返回给用户。本文介绍在分分表场景中数据访问...

MySQL数据

支持 支持 支持 MULTILINESTRING 支持 支持 支持 支持 MULTIPOLYGON 支持 支持 支持 支持 GEOMETRYCOLLECTION 支持 支持 支持 支持 数据同步前准备:MySQL环境准备 在DataWorks上进行数据同步前,您需要参考...

DDL脚本

数据库模式定义语言DDL(Data Definition Language)是用于描述数据库中要存储的现实世界实体的语言。创建语句 设计好的数据库模型,您可以单击 生成DDL脚本,进入 DDL Script编辑器。在 DDL Script编辑器 页面,对象过滤 用于过滤需要...

数据集成

数据集成是阿里对外提供的可跨异构数据存储系统的、可靠、安全、低成本、可弹性扩展的数据同步平台,为20多种数据源提供...您可以通过 数据集成(Data Integration)向云数据库RDS进行数据的导入和导出。支持的数据源请参见 支持的数据源。

操作审计

当您需要快速排查、定位数据库安全问题及有安全审计用途时,可使用操作审计查看在SQL窗口产生的SQL语句列表、工单列表、登录列表、操作日志。功能说明 数据管理DMS的操作审计功能包含了操作日志与操作审计:功能 说明 内容项 操作日志 用户...

Hive

支持一个段落编写多条SQL语句,每条SQL语句以分号;结尾,按照从上到下的顺序执行。支持注释功能。支持并发执行多个段落。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示,在一个段落里执行2句SQL语句(以分号间隔),第句...

概述

使用说明 使用列存索引查询复杂的SQL语句时,您需要 检查SQL语句是否存在未被索引覆盖的列,若存在未被列存索引覆盖的列,您可以针对某条SQL语句 获取创建列存索引的DDL语句 或针对某个业务 批量获取创建列存索引的DDL语句,执行获取到的...

RDS MySQL如何保证数据库字符编码正确

概述 本文主要介绍RDS MySQL如何保证数据库字符编码正确。详细信息 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意实例的容灾、容错能力,确保数据安全。如果您对实例(包括但限于ECS、RDS)等进行配置与数据修改,...

查看审计日志

在日志服务控制台查看审计日志 日志服务存储了数据库审计系统审计到的数据库操作日志,在数据库审计系统查看到的审计日志来源是日志服务。您可以在日志服务控制台查看和下载数据库审计服务创建的Project和Logstore记录的审计日志数据。...

恢复方案概览

登录临时实例 通过临时实例恢复SQL Server数据 跨地域恢复数据 跨地域恢复数据 恢复RDS备份文件至自建数据库 先 下载备份文件,再将备份文件恢复至自建数据库。数据迁移上云 迁移/恢复到新的RDS实例 全量备份数据上云(SQL Server 2008 R2...

创建EMR Impala节点

false:表示每次执行一条SQL语句。“DATAWORKS_SESSION_DISABLE”:适用于开发环境直接测试运行场景。取值如下:true:表示每次运行SQL语句都会新建一个JDBC Connection。false:表示用户在一个节点里运行不同的SQL语句时会复用一个JDBC ...

使用须知

本文介绍使用Lindorm计算引擎SQL语句访问数据库的数据时,需要提前了解的相关内容。了解开源Spark SQL 通过开源Spark SQL访问数据库的数据分为以下三个级别:Catalog:用来标识用户不同的数据源。Namespace:与数据库中Database或者...

通过Spark SQL读写Delta外表

Delta是种可以基于OSS对象存储的数据湖表格式,支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版(3.0)和Delta表格式进行了整合,您可以通过Spark SQL读写Delta外表。本文主要介绍如何通过Spark SQL读写Delta外表。前提...

迁移SQL Server数据库到Babelfish for RDS PostgreSQL

为了实现从SQL Server到Babelfish for RDS PostgreSQL的无缝迁移,本文介绍迁移数据库的操作步骤。利用Babelfish的兼容特性,您将能够快速完成迁移,无需重写大量代码,从而简化迁移工作并节约资源。前提条件 已创建Babelfish for RDS ...

预检查常见问题

本文介绍目标数据库PolarDB O引擎在预检查过程遇到的常见问题和解决方案。目标库账号权限错误 问题描述 目标库账号无权限:目标库账号权限不足。原因 生成迁移计划时,用户名 为目标数据库的普通账号。解决方案 重新生成迁移计划,用户名...

创建EMR Spark SQL节点

false:表示每次执行一条SQL语句。说明 该参数仅支持用于数据开发环境测试运行流程。“ENABLE_SPARKSQL_JDBC”:提交SQL代码的方式。取值如下:true:表示采用JDBC的方式提交SQL代码。当EMR集群无Kyuubi服务时,提交SQL代码至Spark Thrift-...

配置语句规则

调整规则优先级 若同一条SQL关联了多个不同的语句规则,您可以通过调整规则的优先级,使审计的SQL命中优先级高的规则。说明 命中规则的顺序会按照先匹配语句规则后匹配安全规则来进行,且一类型规则之间也会按优先级排序。登录数据库审计...

Spark-SQL命令行工具

提交离线SQL作业 spark-sql工具,提供-e 用于执行以分号隔开的多条sql语句,以及-f 用于执行sql文件的语句(每条sql语句以分号结尾)。用户可将conf字段指定的配置放入 conf/spark-defaults.conf ,然后按照如下格式提交:#使用-e命令...

SQL Console初体验

当您成功在DMS上登录数据库后,可在SQL Console进行创建数据库、创建表、查询表数据、变更表数据等操作。本文以在RDS MySQL数据库中进行操作举例。创建数据库 在RDS控制台创建数据库 访问 RDS实例列表,在上方选择地域,然后单击目标实例...

SQL回放

背景信息 OLTP是传统关系型数据库的主要应用,主要用于基本和日常的事务处理,例如订单交易系统等。OLAP是数据仓库系统的主要应用,支持复杂的分析操作,侧重决策支持,并提供实时分析的能力。其可做到秒级返回分析结果,还可提供直观的...

应用评估

应用评估用于衡量应用与数据库整体迁移改造的情况,可以展示应用需要改造的地方,并给改造建议。前提条件 全部应用采集包都已创建应用画像。背景信息 迁移数据库和应用的过程存在以下几个难点问题:难以估算应用改造的工作量。难以制定...

创建EMR Hive节点

false:表示每次执行一条SQL语句。说明 该参数仅支持用于数据开发环境测试运行流程。“DATAWORKS_SESSION_DISABLE”:适用于开发环境直接测试运行场景。取值如下:true:表示每次运行SQL语句都会新建一个JDBC Connection。false:表示用户...

概述

无 循环SQL 可循环生成SQL语句,再将其分批提交给DMS管理的任意关系型数据库执行,同时,还可以搭配变量,控制SQL循环次数,达到简化SQL循环逻辑、平衡SQL语句对源库产生压力的目的。配置循环SQL节点 跨库Spark SQL 基于Spark引擎,实现大...

通过Spark SQL读写Hudi外表

Apache Hudi(简称Hudi)是基于OSS对象存储的种表格式,支持UPDATE、DELETE和INSERT操作。AnalyticDB for MySQL 湖仓版(3.0)和Hudi做了深度整合,您可以通过Spark SQL读写Hudi外表。本文主要介绍如何通过Spark SQL读写Hudi外表。前提...

慢日志

数据库自治服务DAS(Database Autonomy Service)支持慢日志分析功能,会统计并分析数据库中执行时间超过阈值的SQL语句,并提供相应的治理方案,帮助您快速定位并解决数据库性能问题,提高系统的稳定性和可靠性。前提条件 数据库引擎为 ...

导出数据

本文将为您介绍如何导出表结构、SQL查询结果集、整个数据库。前提条件 数据库关联的安全规则已开启 结果集是否支持导出 规则(系统默认开启)。更多信息,请参见 SQL窗口-关系型数据库。具有目标数据库的查询、导出等权限。更多信息,请...

RDS SQL Server如何收缩事务日志

在数据库服务器上执行如执行以下SQL语句数据库名称需要进行替换,具体SQL处理步骤如下:重要 如果日志已满只能截断日志链进行收缩。原则上允许将数据库修改为SIMPLE简单模式,这种方式会影响RDS的备份链,导致经过当前时间点的所有恢复...

SQL窗口介绍

数据管理DMS的SQL窗口可以非常便捷地执行各类SQL语句,同时支持以可视化的方式对目标数据库进行增、删、改、查等操作,适用于数据查询、数据开发等场景。前提条件 已具备目标库或表的查询权限。申请权限,请参见 权限管理。SQL窗口界面介绍...

超级SQL模式

开启超级SQL模式后,管理员和DBA在SQL Console执行SQL语句,将受安全规则的限制。例如禁止在SQL Console执行DELETE语句、禁止在SQL Console执行CREATE_INDEX语句等安全规则限制。前提条件 系统角色为管理员或DBA,关于用户角色信息...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 云数据库 Redis 版 数据库备份 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用