JOIN优化和执行
JOIN是将多个表以某个或某些列为条件进行连接操作而检索出关联数据的过程，多个表之间以共同列关联在一起。本文主要介绍 PolarDB-X 如何优化和执行JOIN。基本概念 JOIN是SQL查询中常见的操作，逻辑上说，它的语义等价于将两张表做笛卡尔积...
JOIN与子查询的优化和执行
JOIN是将多个表以某个或某些列为条件，进行连接操作而检索出关联数据的过程，多个表之间以共同列而关联在一起。子查询是指在父查询的WHERE子句或HAVING子句中嵌套另一个SELECT语句的查询。基本概念 JOIN是SQL查询中常见的操作，逻辑上说，...
高性能Flink SQL优化技巧
本文将从作业配置和Flink SQL优化两方面为您介绍如何提升Flink SQL作业性能。作业配置优化推荐方案 资源优化技巧 VVP中限制了JobManager和TaskManager的CPU的实际使用大小，配置了多少个CPU，最大就只能使用多少个CPU。因此在资源优化时，...
使用企业管理器导入SQL Server数据失败
当您使用企业管理器导入SQL Server数据时，提示 无法在只读列插入数据。本文介绍这种情况的可能原因和解决方案。问题现象 通过企业管理器导入SQL Server数据时，提示 无法在只读列插入数据。可能原因 将本机数据库中的表导入云虚拟主机数据...
导入数据库文件
本文为您介绍将本地数据库的SQL文件导入云虚拟主机数据库的多种方法。请您与网站开发商或网站制作人员确认您的网站使用的数据库类型，然后根据不同的数据库类型，选择对应的导入方法：使用MySQL数据库，您可以通过以下方式导入本地SQL文件...
离线同步数据质量排查
以下介绍最常见的关系型数据库的写出模式（不同数据源类型写出模式不同）：insert into 将数据使用insert into的SQL语句写出至目标端，如果写出数据和目标存储已有数据发生数据约束（主键冲突、唯一键约束、外键约束等），则来源数据会作为...
执行MaxCompute SQL语句
从Hologres V0.10版本开始，Hologres与MaxCompute集成性进一步提升，支持在Hologres中执行MaxCompute的SQL语句，方便您直接快速操作MaxCompute。本文将为您介绍，在Hologres中如何执行MaxCompute SQL语句。前提条件 已开通Hologres并连接...
从Amazon RDS SQL Server全量迁移至阿里云
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将Amazon RDS SQL Server全量迁移至阿里云RDS SQL Server。前提条件 为保障DTS能够通过公网连接至Amazon RDS SQL Server，需要将Amazon SQL Server的 公开可用性 设置为 是...
通过Spark SQL读写C-Store表数据
AnalyticDB MySQL 湖仓版（3.0）集群支持通过Spark SQL在线或离线读写C-Store表数据。本文主要介绍通过Spark SQL在线或离线读写C-Store表数据的具体方法。前提条件 湖仓版（3.0）集群的存储预留资源需大于0 ACU。详情请参见 创建湖仓版集群...
从自建SQL Server全量迁移至RDS SQL Server
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建SQL Server全量迁移至RDS SQL Server实例。DTS支持结构迁移、全量数据迁移和增量数据迁移，同时使用结构迁移和全量数据迁移可以实现自建SQL Server数据库的全量数据...
查看 SQL 详情
SQL 详情页会根据不同的 SQL 诊断情况，选择性展示对应 SQL 的文本、优化建议、采样明细、诊断详情、采样历史、执行历史和执行计划等信息。SQL 详情 在 SQL 诊断中查看 SQL 的基本信息后，可以通过点击 SQL 跳转到 SQL 详情页面。根据不同...
查看 SQL 详情
SQL 详情页会根据不同的 SQL 诊断情况，选择性展示对应 SQL 的文本、优化建议、采样明细、诊断详情、采样历史、执行历史和执行计划等信息。SQL 详情 在 SQL 诊断中查看 SQL 的基本信息后，可以通过点击 SQL 跳转到 SQL 详情页面。根据不同...
验证读写分离
本文以ECS实例通过内网连接RDS MySQL实例为例，介绍验证RDS MySQL高可用系列实例的读写分离的方法。前提条件 已创建RDS MySQL高可用系列主实例。已为主实例创建只读实例，操作方法请参见 创建MySQL只读实例。已为实例创建至少1个数据库（含...
SQL其他常见问题
本文为您介绍在MaxCompute中执行SQL时，与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒？在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合...
Paimon与Spark集成
E-MapReduce支持通过Spark SQL对Paimon进行读写操作。本文通过示例为您介绍如何通过Spark SQL对Paimon进行读写操作。前提条件 已创建选择了Spark和Paimon的DataLake或Custom类型的集群，创建集群详情请参见 创建集群。使用限制 EMR-3.46.0...
转义字符
返回结果 important 通过以上示例，可以正向地写出符合业务需求的语句，但是这么多转义之后，看到的字符串往往非常难懂，'\\\\"(.*)\\\\"' 究竟想要匹配什么，已经不太容易理解和维护了。可以通过 select 原始的字符串进行反向操作，再结合...
大量数据导出方案
本文将通过示例，为您介绍导出MaxCompute SQL计算结果的方法。说明 本文中所有SDK部分仅以Java举例。概述 您可以通过以下方法导出SQL的运行结果：如果数据比较少，请使用 SQL Task 得到全部的查询结果。如果需要导出某个表或者分区，请使用...
使用SQL管理外部项目
指定写出到HDFS的用户名（非必须）。set odps.external.hadoop.user=;读取Hive表数据。select*from<my_hive_table>limit 10;说明 目前无法对关联的External Project执行DDL类的SQL语句（add partition和drop partition除外）。DDL SQL语句...
从自建SQL Server增量迁移至RDS SQL Server
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建SQL Server增量迁移至RDS SQL Server。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成自建...
查询监控图和SQL列表介绍
AnalyticDB MySQL版 集群提供了SQL诊断功能，支持通过多种维度检索出符合条件的SQL查询（如慢查询），并将检索结果以图像化的方式展示，您还可以将检索结果下载保存到本地进行查看。本文介绍如何使用SQL诊断中的查询监控图和查询列表。查询...
基本语句
尝试写出下面这个例子是一个非常糟糕的主意：EXECUTE 'UPDATE tbl SET '|quote_ident(colname)|'=$'|newvalue|'$WHERE key='|quote_literal(keyvalue);因为如果 newvalue 的内容碰巧含有$，那么这段代码就会出问题。同样的缺点可能适用于你...
如何使用HINT（5.2及以下版本适用）
通过这个 PolarDB-X 1.0 自定义HINT，PolarDB-X 1.0 会计算出SQL语句应该在哪些分库和分表上执行，进而将SQL语句下发到相应的分库。示例 对于名为 drds_test 的 PolarDB-X 1.0 数据库，SHOW NODE 的结果如下：mysql>SHOW NODE\G*1.row*ID:0...
如何发布和调用JDBC数据服务
JDBC数据服务是通过JDBC将后端数据库访问能力在CSB实例上发布为服务，发布服务时只能以RESTful开放类型发布。前提条件 创建或申请CSB实例，请参见 创建实例。了解如何在CSB实例上发布、订阅和调用RESTful服务的基本使用，请参见 快速体验...
管理健康报告
参数化SQL分析从SQL执行频次、SQL执行总耗时、SQL耗时离散度、SQL CPU资源总消耗、SQL内存资源总消耗、SQL执行失败频次等维度进行排序，获取相应的TOP SQL并展现相关指标。通过参数化SQL分析，您可以：获取StarRocks数据库整体的SQL执行...
使用Notebook开发
更多信息，请参见 通过Spark SQL读写C-Store表数据%spark 提交python代码到ADB Spark。说明 新创建的session，ADB Spark会保留20分钟，超时后会被删除。您可通过重启kernel或执行%configure 重新创建新的session。文件的上传与下载 使用...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。不同开发方式的使用方法、...
在EMR集群运行TPC-DS Benchmark
'>sample-queries-tpcds/testbench.settings./runSuite.pl tpcds$SF 使用Spark运行TPC-DS SQL TPC-DS工具集中包含Spark SQL用例，用例位于 spark-queries-tpcds 目录下，可以使用 spark-sql 或者 spark-beeline 等命令行工具执行这些SQL。...
维表JOIN语句
您可以通过 Flink SQL Hints 为维表Join指定表联接时使用的联接策略，来达到优化执行的目的。目前维表Join Hints支持 Lookup Hints，还支持SHUFFLE_HASH、REPLICATED_SHUFFLE_HASH和SKEW三种联接策略。维表Cache策略和联接策略之间的适用...
新建Flink Vvr SQL类型的公共节点
Flink Vvr SQL节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub等类型的数据进行处理。本文介绍如何新建Flink Vvr SQL类型的公共节点。背景信息 Flink ...
新建Flink SQL类型的公共节点
Flink SQL节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL和DataHub等类型的数据进行处理。本文介绍如何新建Flink SQL类型的公共节点。背景信息 Flink SQL是...
新建Flink Vvp SQL类型的公共节点
Flink Vvp SQL节点是流式节点，运行于Flink云计算资源之上，支持对RDS MySQL、Table Store、Hive、Kafka、Hbase、Phoenix、AnalyticDB MySQL、AnalyticDB PostgreSQL和DataHub等类型的数据进行处理。本文介绍如何新建Flink Vvp SQL类型的...
SQL洞察和审计
当您在安全合规审计、性能分析、故障排除等场景下需要监控和管理RDS MySQL实例中执行的SQL语句时，可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和聚合分析。开启该功能后会自动记录来自数据库内核的SQL语句，以及SQL语句的执行...
SQL洞察和审计
当您在安全合规审计、性能分析、故障排除等场景下需要监控和管理RDS MySQL实例中执行的SQL语句时，可以利用SQL洞察和审计功能对SQL语句的执行情况进行记录和聚合分析。开启该功能后会自动记录来自数据库内核的SQL语句，以及SQL语句的执行...
Delta Lake 快速入门
您可以通过运行以下VACUUM命令来执行此操作 SQL%sql VACUUM events 您可以使用 RETAIN<N>HOURS 选项来控制最新快照的保留时间：SQL%sql VACUUM events RETAIN 24 HOURS 有关VACUUM有效使用的详细信息，请参阅 删除不再由Delta表引用的文件...
SQL诊断
基于慢Query日志的数据，Hologres提供SQL诊断的能力，通过对不同维度的趋势、明细分析，可以辅助您了解实例的使用情况并做相应的优化，以达到更好的效果。本文为您介绍如何使用SQL诊断。功能介绍与建议 当前SQL诊断支持的诊断内容如下：...
DQL操作常见问题
问题类别 常见问题 GROUP BY 在执行MaxCompute SQL过程中，报错Repeated key in GROUP BY，如何解决？在执行MaxCompute SQL过程中，报错Expression not in GROUP BY key，如何解决？对表A执行GROUP BY生成表B，表B比表A的行数少，但表B的...
Flink_SQL任务开发方式
Dataphin的Flink_SQL任务支持多种开发方式，包括原生DDL+DML开发、基于Catalog开发、使用Dataphin元表进行开发、使用Dataphin数据源表进行开发、以及使用计算源物理表进行开发，且不同开发方式所创建的表支持任意混用，包括镜像表。...
通过EMR运行基于OSS-HDFS服务的TPC-DS Benchmark
'>sample-queries-tpcds/testbench.settings./runSuite.pl tpcds$SF 使用Spark运行TPC-DS SQL TPC-DS工具集中包含Spark SQL用例，用例位于spark-queries-tpcds目录下，可以使用 spark-sql 或者 spark-beeline 等命令行工具执行这些SQL。...
通过直连数据源模式创建API
直连数据源模式是通过SQL直接从数据源创建API。本文为您介绍如何使用直连API模式生成API。步骤一：选择生成API的方式 在Dataphin首页，单击顶部菜单栏 服务。系统默认进入 市场 页面。按照下图操作指引，进入 API创建方式选择 对话框。在 ...
新功能发布记录
说明 RDS SQL Server内核版本更新说明，请参见 RDS SQL Server小版本Release Notes。2024年 4月 类别 功能名称 功能描述 发布时间 相关文档 新增 错误日志清理 RDS SQL Server新增支持错误日志清理功能，用于清理实例中累计的Errorlog文件...
- 产品推荐
- 这些文档可能帮助您