离线同步能力说明
说明 脏数据是对于业务没有意义，格式非法或者同步过程中出现问题的数据。单条数据写入目标数据源过程中发生了异常，则此条数据为脏数据。因此只要是写入失败的数据均被归类于脏数据。例如，源端是VARCHAR类型的数据写到INT类型的目标列中...
列存索引技术架构介绍
向量化表达式体系 AP型场景，SQL中经常会包含很多涉及到一个或者多个值、运算符和函数组成的计算过程，这都是属于表达式计算的范畴。表达式的求值是一个计算密集型的任务，因此，表达式的计算效率是影响整体性能的一个关键的因素。传统...
SQL错误码（ODPS-01CCCCX）
触发条件：运算表达式过于复杂，导致通过该表达式构造的树的节点数超过了限制5000。处理方法：建议优化运算表达式。ODPS-0130071:Semantic analysis exception-function or view Y cannot be resolved 问题现象：调用内建函数时，详细报错...
NULL值相关的函数
说明 LNNVL可以用于任何可能出现标量表达式的地方，即使在IS[NOT]NULL、AND或OR条件无效但需要考虑潜在NULL的情况下也是如此。数据库有时会以这种方式在内部使用LNNVL函数，将NOT IN条件重写为NOT EXISTS条件。在这种情况下，EXPLAIN PLAN...
PolarDB HTAP实时数据分析技术解密
即表达式系统有两项关键优化：充分利用列式存储的优势，使用分批处理模型代替迭代器模型，使用SIMD指令重写大部分常用数据类型的表达式。例如，所有数字类型（int、decimal、double）的基本数学运算（+-*/abs），全部使用对应的SIMD指令。...
V5.4.x系列实例版本说明
发布日期：2023-08-11 大版本：V5.4.12 小版本：16917477 类别 说明 缺陷修复 修复case when表达式在向量化执行时数据不正确的问题。发布日期：2023-06-19 大版本：V5.4.12 小版本：16871653 类别 说明 新增&优化 升级fastjson的版本到1.2....
排序策略配置
取值范围为int32的取值范围）in 运算 i in[value1,value2,…,valuen]如果i的值在集合[value1,value2,…,valuen]中出现，则该表达式值为1，否则为0。例如：2 in[2,4,6]的值为1，3 in[2,4,6]的值为0。数学函数 函数 说明 max(a,b)取a和b的...
排序策略配置
取值范围为int32的取值范围）in 运算 i in[value1,value2,…,valuen]如果i的值在集合[value1,value2,…,valuen]中出现，则该表达式值为1，否则为0。例如：2 in[2,4,6]的值为1，3 in[2,4,6]的值为0。数学函数 函数 说明 max(a,b)取a和b的...
ORDER BY 子句
也可以在 ORDERBY 子句中使用任意表达式，包括未出现在 SELECT 结果列表中的列。因此，以下语句是有效的：SELECT ename FROM emp ORDER BY empno;此特性的限制是，应用于 UNION、INTERSECT 或 MINUS 子句结果的 ORDER BY 子句只能指定输出...
Tunnel命令常见问题
问题类别 常见问题 Tunnel Upload Tunnel Upload是否支持通配符或正则表达式？Tunnel Upload对文件大小是否有限制？记录大小是否有限制？是否要使用压缩？同一个表或分区是否可以并行上传数据？是否支持多个客户端同时上传数据至同一张表？...
Rank 类
功能简介 Rank 表达式类及rerank_size参数方法描述 构造函数 无参构造函数 Rank()设置粗排表达式名称 接口定义 设置粗排表达式名称 Rank setFirstRankName(String firstRankName)参数描述 参数名称 类型 描述 firstRankName String 粗排...
Dataphin执行计算任务发现正则表达式不能使用
问题描述 用户执行一段SQL代码，发现在Hive执行结果和Dataphin不一致，用户使用了正则表达式。问题原因 MaxCompute计算引擎，如果没有开启Hive语法兼容，并不能完美适配Hive项目切换到MaxCompute之后的语法。解决方案 需要加上set odps.sql...
排序表达式
表达式语法 问天引擎支持用户使用内置支持的运算符定制自己的算分公式，问天引擎支持的运算符如下所示：运算 运算符 说明 一元运算-负号，功能为对某个表达式的值取负值，如-1,-max(width)。算数运算+,-,*,/如width/10 关系运算=,!如...
排序表达式
表达式语法 召回引擎版支持用户使用内置支持的运算符定制自己的算分公式，召回引擎版支持的运算符如下所示：运算 运算符 说明 一元运算-负号，功能为对某个表达式的值取负值，如-1,-max(width)。算数运算+,-,*,/如width/10 关系运算=,!...
DQL操作常见问题
问题类别 常见问题 GROUP BY 在执行MaxCompute SQL过程中，报错Repeated key in GROUP BY，如何解决？在执行MaxCompute SQL过程中，报错Expression not in GROUP BY key，如何解决？对表A执行GROUP BY生成表B，表B比表A的行数少，但表B的...
正则表达式
本文为您介绍MaxCompute SQL中正则表达式支持的元字符、字符组和转义字符。元字符 MaxCompute SQL支持以下常见的元字符，具体如下表所示。元字符 说明^行首。行尾。任意字符。匹配前面的子表达式0次或多次。匹配前面的子表达式1次或多次。...
历史记录
本文介绍了SchedulerX产品在2022年以前发布涉及的新增功能、功能优化、重要问题修复及对应的文档，帮助您了解SchedulerX的历史发布动态。服务端 2021-12-01 新特性 新增API：指定机器。新增API：查询工作流。2021-06-02 新特性 支持应用...
如何调试正则表达式
说明 完整正则模式提供自动生成正则表达式功能，但是在为多行日志生成正则表达式时，会存在问题，本文以Regex101为例进行正则表达式的调试和修改。具体操作 访问 Regex101，将日志服务根据日志样例自动生成的完整正则表达式拷贝到 REGULAR ...
OpenSearch文档排序实践
sort子句与排序策略的关系 简单来说sort子句在OpenSearch中代表全局排序，而排序策略可以理解为sort子句中的一个层级的排序，排序策略是通过系统内置的函数结合表达式形成一种复杂的文档算分逻辑来实现用户复杂的业务场景，但最终参与排序...
MaxCompute UDF（Java）常见问题
产生原因：在SELECT语句中调用Java UDTF时，存在Java UDTF与其他列或表达式混用的问题，Java UDTF暂不支持该用法。错误示例如下。select b.*,'x',udtffunction_name(v)from table lateral view udtffunction_name(v)b as f1,f2;解决措施：...
三角函数
函数名 描述 用例 结果 acos(bigint)返回BIGINT类型表达式的反余弦值。acos(1)0.0 acos(int)返回INT类型表达式的反余弦值。acos(1)0.0 acos(float8)返回FLOAT8类型表达式的反余弦值。acos(0.9)0.45102681179626236 acos(float4)返回FLOAT4...
表达式
表达式是数字、算符、数字分组符号、自由变量和约束变量等的组合。在魔笔中，您可以通过运算符、函数以及变量组成表达式，并在工作流操作中调用表达式，以实现对应的业务功能。关于表达式的详细说明，请参见 表达式。
数学函数
函数名 描述 用例 结果 abs(bigint)返回BIGINT类型表达式的绝对值。abs(-17)17 abs(int)返回INT类型表达式的绝对值。abs(-17)17 abs(float8)返回FLOAT8类型表达式的绝对值。abs(-17.4)17.4 abs(float4)返回FLOAT4类型表达式的绝对值。abs(-...
Hologres SQL语句的常见问题
报错：ERROR:Currently materialized view does not support aggregate on expressions,only support single column 问题原因：单表物化视图不支持表达式，从而导致报错。解决方法：单表物化视图不使用表达式，详情请参见 实时物化视图...
Java SDK
本文介绍SchedulerX产品的Java SDK发布的功能变更，包括新增功能、功能优化、重要问题修复等，帮助您了解SchedulerX的Java SDK发布动态。发布记录 1.11.4，2024-03-20 功能名称 变更类型 功能描述 相关文档 工作流 新增 JobContext可以获取...
通用聚合函数
函数名 描述 用例 结果 array_agg(anyelement)将表达式的值串联到数组中。暂不支持JSON、JSONB、TIMETZ、INTERVAL、INET、OID、UUID数据类型和数组类型。array_agg(c1){1,2} {true,false} {a,b} {1.1,2.2} avg(bigint)求BIGINT类型表达式...
ValueTransferRule
使用正则表达式匹配到字符串后，将字符串转换为String、Integer或者Double类型。数据结构 message ValueTransferRule { required string regex=1;optional VariantType cast_type=2;} 名称 类型 是否必选 描述 regex string 是 正则表达式...
条件表达式
本文介绍条件表达式的基本语法和示例。日志服务支持如下条件表达式。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，...
配置条件分支节点
新增一个与原表达式同级的条件表达式，并从逻辑运算符下拉列表中，选择新增表达式与原表达式之间的逻辑运算符。新增一个条件表达式，且该表达式与原表达式共同移动到下一级。从逻辑运算符下拉列表中，选择新增表达式与原表达式之间的逻辑...
使用方法 表达式.Enum.PDFMode.PDFNormalMode 表达式：文档类型应用对象 参数 字段 值 描述 PDFNormalMode 0 多页模式。PDFSingleMode 1 单页模式。ZoomToFitType 对文档窗口大小进行调整后，通过 ZoomToFitType 指定是否缩放视图以适应...
文字
使用方法 表达式.Enum.PageFitType.wdPageFitNone 表达式：文档类型应用对象 参数 字段 值 描述 wdPageFitBestFit 2 文档窗口大小进行调整后使页面以最佳尺寸适应活动窗口。BasePoint 通过 BasePoint 指定用于对齐的基点。使用方法 表达式....
OpenSearch-行业算法版文档排序实践
函数 描述 案例 i in(value1,value2,…,valuen)如果i的值在集合[value1，value2，…，valuen]中出现，则该表达式值为1，否则为0。字段age=5 age in(1,2,3,4,5)#结果为1 age in(6,7,8,9)#结果为0 if(cond,then_value,else_value)如果cond的...
RLIKE字符匹配
转义符 RLIKE操作符支持反斜线 \ 作为转义符，因此正则表达式的模式中出现的 \ 都要进行二次转义。使用示例 示例1 正则表达式要匹配字符串 a+b，其中+是正则中的一个特殊字符，因此要用转义的方式表达。在正则表达式引擎中的表达方式是 a\\...
语句
语法示例：/if.if(表达式)语句;if(表达式)语句;if(表达式){ 代码块;}/if.else if(表达式)语句;else 语句;if(表达式)语句;else 语句;if(表达式){ 代码块;} else { 代码块;}/if.else if.else.if(表达式){ 代码块;} else if(表达式){ 代码块;}...
概述
表达式 根据FEEL(Friendly Enough Expression Language，一种DMN规范定义的表达式语言）的定义，表达式 可以分为一元表达式（Unary-tests，布尔表达式）和普通表达式（General expression，可以返回不同类型的表达式）。数据探索结构化的...
ALL_IND_EXPRESSIONS
ALL_IND_EXPRESSIONS视图提供了关于数据库中所有索引表达式的信息。简介 all_ind_expressions 视图是 PolarDB PostgreSQL版（兼容Oracle）中的一个系统视图，提供了关于数据库中所有索引表达式的信息，但仅限于当前用户有权限访问的表达式...
REGEXP_EXTRACT_ALL
在字符串中查找所有出现的正则表达式匹配模式的子字符串，并把找到的字符串以数组返回。命令格式 array<T>regexp_extract_all(string,string[,bigint])参数说明 source：必填。STRING类型。待分析的字符串。pattern：必填。STRING类型。待...
过滤日志
说明 日志字段的值完全匹配 采集日志 中的正则表达式，且不匹配 丢弃日志 中的正则表达式时，日志才会被采集，否则直接丢弃。参数 说明 采集日志 输入日志字段名和该字段值匹配的正则表达式。如果原始日志中的目标字段值符合对应的正则表达...
Quick BI添加计算字段时如何引用其他计算字段
问题描述 已经添加了一个计算字段（毛利率字段），另一个计算字段需要用到该计算字段，但是无法选择到这个字段 问题原因 已创建的计算字段不可以直接被其他计算字段引用，新建的计算字段只能引用原字段。解决方案 您可以复制需要引用的计算...
基本概念
[回到顶部]C Cron 表达式 Cron expression，固定格式的字符串，用来指定一个时间点或者一个重复触发的时间间隔。详见 Cron 表达式说明。Consumer 实例 Consumer instance，Consumer 的一个对象实例，不同的 Consumer 实例可以运行在不同...
- 产品推荐
- 这些文档可能帮助您