Kafka集群的数据存储格式
更新数据的示例如下：说明 2022年3月20日之前创建的DTS订阅实例，源表的 DELETE 语句同步到kafka，其中 old 的值是数据，data 的值是null。为了和开源社区保持一致，2022年3月20日起创建或重启的DTS订阅实例，data 的值是数据，old 的值是...
Kafka集群的数据存储格式
更新数据的示例如下：说明 2022年3月20日之前创建的DTS订阅实例，源表的 DELETE 语句同步到kafka，其中 old 的值是数据，data 的值是null。为了和开源社区保持一致，2022年3月20日起创建或重启的DTS订阅实例，data 的值是数据，old 的值是...
GROUPING函数
在后一种情况下，该列可以是 null 值也可以是非 null 值，但在任何情况下，它都是其对应列的特定值，而不是多个值的小计。以下查询显示了 GROUPING 函数的返回值如何对应于小计行。SELECT loc,dname,job,COUNT(*)AS"employees",GROUPING...
MySQL数据源
您可以在MySQL数据库通过如下语句查看当前MySQL数据库版本。SELECT version();准备工作2：配置账号权限 建议您提前规划并创建一个专用于DataWorks访问数据源的MySQL账号，操作如下。可选：创建账号。操作详情请参见 创建MySQL账号。配置...
CREATE TYPE
这些函数为用户定义类型提供了与内部数据库系统的交互方式，确保类型能够适应数据库的存储和通信机制。您可能对如何能够在创建新类型之前声明输入和输出函数这一过程感到疑惑，因为这些函数需要引用尚未创建的新类型作为返回值或参数。解决...
CREATE TYPE
这些函数为用户定义类型提供了与内部数据库系统的交互方式，确保类型能够适应数据库的存储和通信机制。您可能对如何能够在创建新类型之前声明输入和输出函数这一过程感到疑惑，因为这些函数需要引用尚未创建的新类型作为返回值或参数。解决...
窗口函数
如果偏移量的值是null或者大于窗口长度，default_value会被返回，如果没有指定则会返回 null。lag(x[,offset[,default_value]])→[与输入类型相同]返回窗口内，距当前行前偏移offset的值。偏移量起始值是0，就是指当前数据行。偏移量可以是...
缓存数据持久化
当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时，阿里云为您提供了缓存数据持久化的高效方案，该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作，确保数据的高速访问和持久化存储，具备高吞吐、低...
DROP DATABASE
语法 DROP DATABASE[IF EXISTS][catalog_name.]db_name 参数说明 参数 是否必选 说明 catalog_name 否 数据库的Catalog。db_name 是 数据库名，用于唯一识别一个数据库。示例 删除名为mydatabase的数据库。DROP DATABASE mydatabase;返回...
CREATE DATABASE
语法 CREATE DATABASE[IF NOT EXISTS][catalog_name.]db_name[COMMENT database_comment]参数说明 参数 是否必选 说明 catalog_name 否 指定该数据库的Catalog。db_name 是 数据库名。database_comment 否 数据库的注释信息。示例 创建一个...
其他函数
示例3：参数值无非NULL值，返回报错。返回报错，至少有一个参数值非NULL。coalesce(null,null,null,null);UUID 命令格式 string uuid()命令说明 返回一个随机ID，格式为 29347a88-1e57-41ae-bb68-a9edbdd9*。说明 UUID返回的是一个随机的...
如何去掉从仪表板中导出的null值
问题描述 当仪表板中出现空值，导出数据后空值处会显示null，用户常常需要去掉null值 解决方案 可以在数据集编辑界面对空值进行替换，具体操作步骤如下：新建字段，判断数据为空时使用空字符串进行替换：保存数据集，新建仪表板，使用新建...
导入测试数据
bin/bash#用0来替换第一个字段的NULL值，把^|替换成0|#用0来替换中间字段的NULL值，把|替换成|0|#用0来替换最后一个字段的NULL值，把|$替换成|0 for s_f in `ls*dat` do echo"$s_f"i=1 while[`egrep '\|\|^\|\|$'$s_f|wc-l`-gt 0]do echo$i...
MULTIMAP_FROM_ENTRIES
如果结构体中的字段（StructField）数量不是2或Key包含Null值，则抛出异常。示例 SELECT multimap_from_entries(array(struct(1,'a'),struct(2,'b'),struct(1,'c')));返回结果如下：{1:['a','c'],2:['b']} 相关函数 MULTIMAP_FROM_ENTRIES...
CREATE DATABASE
CREATE DATABASE 用于创建数据库。创建数据库 说明 每个集群最多可以创建2048个数据库。语法 CREATE DATABASE[IF NOT EXISTS]db_name 参数 db_name：数据库名。密码规则如下：长度不超过64个字符。以小写字符开头。可包含字母、数字以及...
其他函数
通常，SQL分析在计算 NULL=NULL 时返回NULL，但在该函数中，NULL与NULL的值是相等的。示例 例如表 sale_detail 的字段为 shop_name string,customer_id string,total_price double,包含数据如下。shop_name|customer_id|total_price|sale_...
CREATE DATABASE
本文介绍创建数据库的基本语法。CREATE DATABASE基本语法如下：CREATE DATABASE[IF NOT EXISTS]db_name[ON CLUSTER cluster];参数说明：db_name：数据库名。以小写字母开头，可包含字母、数字以及下划线（_），但不能包含连续两个及以上的...
数据源过滤条件（RDS/PolarDB）
数据源过滤条件中的字段，需填写为数据库表字段，而不是开放搜索应用结构中的字段名；数据源过滤条件生效后，只能拉取符合该条件的记录（全量和增量数据均生效）。例：配置了status=1的过滤条件后，rds中某一条原先status=1的文档改为了...
创建数据库
在进行数据写入和查询前，您需要先创建数据库。本文介绍如何使用DMS（Data Management Service）创建数据库。使用限制 每个 云数据库ClickHouse 集群最多可以创建256个数据库。前提条件 已完成快速入门的如下步骤。新建集群 创建账号 设置...
数据源过滤条件（RDS/PolarDB）
数据源过滤条件中的字段，需填写为数据库表字段，而不是开放搜索应用结构中的字段名；数据源过滤条件生效后，只能拉取符合该条件的记录（全量和增量数据均生效）。例：配置了status=1的过滤条件后，rds中某一条原先status=1的文档改为了...
ARRAY_MAX
如果ARRAY数组 a 中存在元素为NULL，NULL值不参与运算。使用示例-返回20。select array_max(array(1,20,null,3));相关函数 ARRAY_MAX函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂...
ARRAY_MIN
如果ARRAY数组 a 中存在元素为NULL时，NULL值不参与运算。使用示例-返回1。select array_min(array(1,20,null,3));相关函数 ARRAY_MIN函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂...
DECODE
通常，MaxCompute SQL在计算 NULL=NULL 时返回NULL，但在该函数中，NULL与NULL的值是相等的。使用示例 例如表 sale_detail 的字段为 shop_name string,customer_id string,total_price double,包含数据如下。shop_name|customer_id|total_...
其他函数
返回值说明 返回值为转换后的目标数据类型。如果设置了 setproject odps.function.strictmode=false，则会返回字母前的数字。如果设置了 setproject odps.function.strictmode=true，则会返回错误。当转化成Decimal类型时，如果设置了 odps...
ARRAY_REMOVE
返回规则如下：如果ARRAY数组 a 中存在元素为NULL时，NULL值不参与运算。如果ARRAY数组 a 或 element 为NULL，返回NULL。ARRAY数组 a 中不存在 element 时返回原ARRAY数组 a。使用示例 示例1：删除ARRAY数组 array(3,2,1)中等于 1 的元素。...
ARRAY_DISTINCT
ARRAY数组 a 中存在元素为NULL时，NULL值会参与运算。输入数组为空时，返回空数组。使用示例 示例1：去除ARRAY数组 array(10,20,30,30,20,10)中的重复元素。命令示例如下。返回[10,20,30]。select array_distinct(array(10,20,30,30,20,10)...
ARRAY_INTERSECT
返回规则如下：ARRAY数组中存在元素为NULL时，NULL值会参与运算。新ARRAY数组无重复元素且元素顺序与 a 中的元素顺序保持一致。如果ARRAY数组 a 或 b 为NULL，返回NULL。使用示例 示例1：计算ARRAY数组 array(1,2,3)和 array(1,3,5)的交集...
系统运算符（2.0版）
逻辑运算符 运算符 描述 例子 AND a和b两者都为true则返回True a AND b OR a或b有一个为true就返回True a OR b NOT a为false则返回True NOT a Null值对逻辑运算符的影响 当运算符AND的输入中包含FALSE时必然返回FALSE，否则如果输入中包含...
CONCAT
数组中的元素为NULL值时会参与运算。str1、str2：必填。STRING类型。如果输入参数为BIGINT、DOUBLE、DECIMAL或DATETIME类型，则会隐式转换为STRING类型后参与运算，其他类型会返回报错。返回值说明 返回ARRAY类型。如果任一输入ARRAY数组为...
资源组
资源组（Resource Group）是 PolarDB PostgreSQL版（兼容Oracle）提供的可以对进程、数据库和用户三种粒度所使用资源进行限制的机制，可以对CPU，内存资源实现精细化的控制。背景信息 如果在同一个节点上存在多个实例或者一个实例存在复杂...
跨库查询
当需要查询分散在不同数据库中的数据时，您可以使用 云原生数据仓库 AnalyticDB PostgreSQL 版 的跨库查询功能方便地将数据聚合在一起，进行高效查询，提高数据访问效率。功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例...
DescribeSynDbs-查看同步db
rm-wz9d11qg1j0h4*SynDb string 云数据库 RDS MySQL 的数据库。database SynStatus boolean 同步是否成功，取值说明：true：同步成功。false：同步失败。true ErrorMsg string 当 SynStatus 返回为 true 时，不返回该参数。当 SynStatus ...
BITWISE_OR_AGG
BIGINT类型的值，NULL值不参与计算。返回值说明 返回BIGINT类型。示例 select id,bitwise_or_agg(v)from values(1L,2L),(1L,1L),(2L,null),(1L,null)t(id,v)group by id;返回结果如下。id|_c1|+-+-+|1|3|2|NULL|+-+-+相关函数 BITWISE_OR_...
BITWISE_AND_AGG
BIGINT类型的值，NULL值不参与计算。返回值说明 返回BIGINT类型。示例 select id,bitwise_and_agg(v)from values(1L,2L),(1L,1L),(2L,null),(1L,null)t(id,v)group by id;返回结果如下。id|_c1|+-+-+|1|0|2|NULL|+-+-+相关函数 BITWISE_AND...
MAP_FROM_ENTRIES
如果结构体的Field数量不是2或 K 包含NULL值，会返回报错。使用示例-返回{1:a,2:b}。select map_from_entries(array(struct(1,'a'),struct(2,'b')));返回{1:a,2:c}。select map_from_entries(array(struct(1,'a'),struct(2,'b'),struct(2,'...
ARRAY_EXCEPT
ARRAY数组中存在元素为NULL时，NULL值会参与运算。任一输入数组为空时，返回对非空数组去重后的新ARRAY数组。输入数组全部为空时，返回空数组。使用示例 示例1：找出在ARRAY数组 array(1,1,3,3,5,5)中，不在ARRAY数组 array(1,1,2,2,3,3)中...
SORT_ARRAY
NULL值为最小值。使用示例 示例1：例如表 t_array 的字段为 c1 array,c2 array,c3 array，包含数据如下：+-+-+-+|c1|c2|c3|+-+-+-+|[a,c,f,b]|[4,5,7,2,5,8]|[你,我,他]|+-+-+-+对表的每列数据进行排序。命令示例如下。返回[a,b,c,f][2,4,5...
MAP_FROM_ARRAYS
如果 a 中元素包含NULL值或两个数组长度不相等，会返回报错。使用示例-返回{1:2,3:4}。select map_from_arrays(array(1.0,3.0),array('2','4'));返回{1:2,3:6}。select map_from_arrays('last_win',array(1.0,3.0,3),array('2','4','6'));...
将本地表串行导出至OSS引擎
详情请参见 连接数据库集群。如果您需要增量备份数据至OSS，您可以 创建备份计划，并 配置备份计划 来将数据增量备份至OSS。建议您在只读节点执行导出任务。您可以在SQL语句中添加HINT语法/*FORCE_SLAVE*/或直接连接只读节点进行导出。参数...
概述
当 INSERT 语句没有包含自增列，或者为自增列指定的值是0或NULL时，PolarDB-X 会自动为该列分配一个全局唯一的值；当 INSERT 语句显式为自增列插入值时，PolarDB-X 会使用指定的显式值，并自动跟随插入的显式值，使后续自动填充的值大于已...
- 产品推荐
- 这些文档可能帮助您