基本概念
本文将向您介绍 云数据库SelectDB版 产品中涉及的一些基本名词概念，以便于您更好地理解 云数据库SelectDB版 产品。地域（Region）购买 云数据库SelectDB版 的...条件函数 条件函数是指根据条件判断并返回不同结果的函数，包括IF、CASE等。
聚合函数
查询和分析语句（调试）*|SELECT count(request_method)AS count 查询和分析结果 count_if函数 count_if函数用于统计满足指定条件的日志条数。语法 count_if(boolean expression)参数说明 参数 说明 boolean expression 参数值为布尔表达式...
函数概览
SQL 是一种广泛使用的查询、分析语言，主要用于结构化良好数据的过滤、转换、统计、聚合等分析场景，可以在 SLS 日志查询、分析功能中使用。SPL 是一种管道式查询、处理语言，主要用于数据的预处理、查询场景，可以在 SLS 的日志查询（Scan...
高级查询的SQL语法
您可以在高级查询中使用SQL语法，查询或分析您通过跟踪投递到日志服务SLS的日志事件。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示...
内建函数概述
数学函数 MaxCompute SQL提供了如下数学函数供您在开发过程中使用，您可以根据实际需要选择合适的数学函数，进行数据计算、数据转换相关操作。说明 取余数计算等更多计算请参见 算术运算符。函数 功能 ABS 计算绝对值。ACOS 计算反余弦值。...
条件表达式
查询和分析语句*|SELECT sum(IF(status=200,1,0))*1.0/count(*)AS status_200_percentag 查询和分析结果 COALESCE表达式 COALESCE表达式用于返回多个表达式中第一个非null的值。语法 COALESCE(expression1,expression2,expression3.)参数...
V5.4.x系列实例版本说明
修复问题 修复当同时使用Join Hint和Limit SQL语句时，可能出现的栈溢出问题。修复当通过ALTER TABLE添加全局二级索引（GSI）或执行ScaleOut命令时，由于数据回填中使用了默认的 sql_mode 导致报错的问题。修复特定场景下，执行RENAME ...
版本发布说明
修复 drop table 语句中包含多个库名时SQL依然可以执行成功的问题。修复AUTO模式数据库中分区表的分区列包含反引号字符时，创建表报错的问题。修复在扩缩容或者UGSI创建过程中，insert ignore（returning）可能导致数据校验不通过的问题。...
CREATE MATERIALIZED VIEW
如果物化视图开启了查询改写功能，使用如下SQL语句查询数据时会直接从物化视图中查询数据：select empid，deptname from emps join depts on emps.deptno=depts.deptno where hire_date>='2018-01-01';相当于如下语句。select empid,...
时序引擎版本说明
修复在降采样查询中COUNT函数和其他算子混合使用时报类型转换错误的问题。修复在PrepareStatement语句中使用Limit不支持Long类型的问题。修复存储锁住后无法手动删除数据的问题。修复SQL接口（api/v2/sql）对于长链接连续发起查询操作造成...
SQL查询介绍
ShouldQueries OR 排序和翻页 FieldSort ORDER BY SetLimit LIMIT 统计聚合 最小值 MIN()最大值 MAX()和 SUM()平均值 AVG()统计行数 COUNT()统计去重行数 COUNT(DISTINCT)获取统计聚合分组中的行 ANY_VALUE()字段值分组 GROUP BY
在DTS迁移或同步任务中配置ETL
数据传输服务DTS（Data Transmission Service）提供的流式数据ETL（Extract Transform Load）数据处理功能，结合DTS的高效流数据复制能力，可以实现流式数据的抽取、数据转换、加工和数据装载。本文介绍在DTS链路内配置ETL的操作步骤及相关...
使用do-while节点实现复杂的数据分析
以上代码中使用到的DML及函数如下：插入或覆写数据（INSERT INTO|INSERT OVERWRITE）CONCAT COUNT SUM ADD_MONTHS REPLACE TO_DATE LPAD NVL 设置 60_day 节点。此节点用于统计2022年每个月第1天的近2个月订单数据。INSERT INTO orders_...
SQL基本语法
本文为您介绍高级搜索中使用的SELECT查询语句的基本语法。查询语法 从数据库中检索数据的过程或命令称为查询。在SQL中，SELECT 命令用于指定查询。SELECT语句的基本语法如下：SELECT[DISTINCT]column1[AS column_name],column2,function ...
配置跨库Spark SQL节点
任务编排中的跨库Spark SQL节点，主要针对各类跨库数据同步和数据加工场景，您可以通过编写Spark SQL，完成各种复杂的数据同步或数据加工的任务开发。前提条件 支持的数据库类型：MySQL：RDS MySQL、PolarDB MySQL版、MyBase MySQL、...
使用限制
基于数据条数的触发条件判断可能不准确，此时建议使用COUNT函数进行统计。分析语句默认返回100行结果。如果您需要更多数据，可使用LIMIT语句。如果一条分析语句的结果超过1000条，那么系统只选取前1000条用于集合操作。当存在三个查询和...
错误码
集合函数目前只支持 SUM、COUNT、AVG、MIN、MAX，其它集合函数不支持 集合函数目前只支持 SUM、COUNT、AVG、MIN、MAX，修改 SQL 语句。DTX-450 There must be primaryKey in table[%s]of db[%s].业务表必须有主键 给所有业务表添加主键。...
告警
基于数据条数的触发条件判断可能不准确，此时建议使用COUNT函数进行统计。分析语句默认返回100行结果。如果您需要更多数据，可使用LIMIT语句。如果一条分析语句的结果超过1000条，那么系统只选取前1000条用于集合操作。当存在三个查询和...
MaxCompute UDF概述
在SQL语句中使用自定义函数时，如果计算的数据量过大并且存在倾斜，会导致作业占用的 内存超出默认分配的内存。此时，您可以在Session级别设置 set odps.sql.udf.joiner.jvm.memory=xxxx;属性来解决此问题。更多自定义函数常见问题，请参见...
通过直连数据源模式创建API
直连数据源模式是通过SQL直接从数据源创建API。本文为您介绍如何使用直连API模式生成API。步骤一：选择生成API的方式 在Dataphin首页，单击顶部菜单栏 服务。系统默认进入 市场 页面。按照下图操作指引，进入 API创建方式选择 对话框。在 ...
PolarDB MySQL版8.0.1版本发布日志
本文将详细介绍 PolarDB MySQL版 8.0.1版本的更新日志和全部的功能特性。8.0.1.1.41 类别 说明 发布时间 新增功能和性能优化 列存索引中新增基于TopK下推的Left Join功能。支持为用户授予执行 SHOW_ROUTINE、FLUSH_USER_RESOURCES、FLUSH_...
新功能发布记录
ACU时包 2023年2月 V3.1.6.4 类别 名称 说明 相关文档 新增 Roaring Bitmap函数 Roaring Bitmap是一种高效的Bitmap压缩算法，被广泛应用在各种语言和各种大数据平台，常用于去重、标签筛选、时间序列等计算中。Roaring Bitmap函数 漏斗分析...
PolarDB MySQL版8.0.2版本发布日志
开启全局一致性（高性能模式）功能后，若当前执行的SQL语句不需要使用该功能，支持在当前的SQL语句中使用Hint语法来关闭全局一致性（高性能模式）功能。支持在Grouping子句中使用关联子查询，以及消除复杂关联子查询。支持在多主集群（库表...
V5.1.x系列实例版本说明
修复VARBINARY类型的列在系统编码是GBK的情况下，取数据的结果会和数据库中的不一致的问题。修复LEFT JOIN中含有子查询时丢失条件导致查询结果不正确的问题。修复了部分场景下长SQL会导致内存溢出的问题。包年包月实例变配前，需要检查用户...
优化内部表的性能
本文为您介绍在Hologres中对内部表性能进行调优的最佳实践。更新统计信息 统计信息决定是否能够生成正确的执行计划。例如，Hologres需要收集数据的采样统计信息，包括数据的分布和特征、表的统计信息、列的统计信息、行数、列数、字段宽度...
高性能Flink SQL优化技巧
本文将从作业配置和Flink SQL优化两方面为您介绍如何提升Flink SQL作业性能。作业配置优化推荐方案 资源优化技巧 VVP中限制了JobManager和TaskManager的CPU的实际使用大小，配置了多少个CPU，最大就只能使用多少个CPU。因此在资源优化时，...
函数总览
本文列举数据加工任务所涉及的所有函数。全局操作函数 函数分类 函数名称 说明 流程控制函数 e_if 条件与操作组合。满足条件则进行对应操作，不满足条件则不进行对应操作，直接进行下一个条件判断。对于某一条日志，如果其中某一操作删除了...
物化视图操作
如果物化视图开启了查询改写功能，使用如下SQL语句查询数据时会直接从物化视图中查询数据：select empid，deptname from emps join depts on emps.deptno=depts.deptno where hire_date>='2018-01-01';相当于如下语句。select empid,...
新建及管理质量规则模板
支持定义2种类型：通用：校验条件和具体的数据源无关，所有类型均可以使用相同的校验语句，如：完整性模板。特定类型：规则定义仅对特定数据源类型生效，需要选择具体的数据源类型。配置后仅支持在指定数据源类型的监控对象下创建质量规则...
新建及管理质量规则模板
支持定义2种类型：通用：校验条件和具体的数据源无关，所有类型均可以使用相同的校验语句，如：完整性模板。特定类型：规则定义仅对特定数据源类型生效，需要选择具体的数据源类型。配置后仅支持在指定数据源类型的监控对象下创建质量规则...
错误代码
产生TDDL-4203错误表示SQL语句扫描了多个分库的数据并且执行时间超过900秒，建议进行如下优化：尽量在WHERE条件中添加分库键（Sharding key）条件，将SQL语句优化成单库执行。检查是否可以在后端RDS MySQL上创建适合的索引，提升扫描各个分...
公告
set odps.session.networklink=your_networklink_name 外部表场景 若您在建表DDL语句中加入VPC开关、访问的VPC、对应的IP和端口以及地域参数，指定外部表映射的VPC中的数据源。RDS外表例子 CREATE EXTERNAL TABLE mc_vpc_rds_external(id ...
质量规则参数配置
校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看质量报告。填写...
质量规则参数配置
校验表数据过滤：默认关闭，开启后可配置校验表的过滤条件或分区过滤或普通数据过滤，过滤条件将会直接追加至校验SQL中；如校验表有分区过滤需求，建议在调度配置中配置分区表达式，配置后会以校验分区为最小查看粒度查看质量报告。填写...
迁移MySQL至Hologres
本文将为您介绍，MySQL数据平滑迁移至Hologres的操作方法，以及迁移完成后MySQL与Hologres查询语句与函数的使用区别，方便您更加快速的完成数据迁移。数据迁移方法 下表将根据您的迁移类别，为您介绍该类别适用的场景以及迁移方法。说明 如...
控制结构
PL/SQL有三种形式的 IF：IF.THEN.END IF IF.THEN.ELSE.END IF IF.THEN.ELSIF.THEN.ELSE.END IF 以及两种形式的 CASE：CASE.WHEN.THEN.ELSE.END CASE CASE WHEN.THEN.ELSE.END CASE IF-THEN IF boolean-expression THEN statements END IF;...
列存索引技术架构介绍
官方从MySQL 8.0开始，在 count(*)等基本查询上增加了并行执行能力，但构建复杂SQL语句的并行执行能力依然任重道远。MySQL最常用的存储引擎都是按行存储，在按列进行海量数据分析时，按行从磁盘读取数据存在非常大的IO带宽浪费。其次，行式...
功能发布记录
函数能力增强：支持更多函数运行在HQE，提升函数性能，详情请参见 函数功能发布记录 重构Table Function函数支持框架，支持generate_series（INT、BIGINT、NUMERIC）运行在HQE。重构PQE函数支持框架，支持left、right、text:timestamp、...
错误码
示例：ERR-CODE:[PXC-1094][ERR_UNKNOWN_THREAD_ID]Unknown thread id:*说明：在 PolarDB-X 上执行 KILL 命令取消执行的SQL语句时，如果指定的会话ID不存在，或者对应的SQL语句已经结束执行，会提示PXC-1094错误。建议使用 SHOW ...
DQL操作常见问题
解决措施 修改SQL语句，确保在GROUP BY子句中，SELECT查询的列，必须是GROUP BY中的列或聚合函数（例如SUM或COUNT）加工过的列。对表A执行GROUP BY生成表B，表B比表A的行数少，但表B的物理存储量是表A的10倍，是什么原因造成的？数据在...
- 产品推荐
- 这些文档可能帮助您