CROSS JOIN
数组结构转多行 将某一列转成数组，然后转成多行，示例如下：#建库 CREATE DATABASE mydb;USE mydb;建表 CREATE TABLE test(userid INT,user_name VARCHAR,product VARCHAR)distributed by hash(userid);插入两行测试数据 INSERT INTO test...
背景信息及准备工作
SQL操作中，经常有行转列（Pivot）和列转行（Unpivot）的数据处理需求。本文将通过SQL示例，介绍如何在 Data Lake Analytics（DLA）中使用SQL，达到行转列和列转行的目的。另外，DLA支持JSON函数和UNNEST语法，您可以更加方便、灵活地通过...
行转列及列转行最佳实践
在数据开发、分析的过程中，您可能需要在不同维度下展示数据或为了符合某些数据表格式要求，此时需要对数据行转列或列转行。本文以一个具体示例为您介绍在MaxCompute中实现行转列、列转行的SQL。背景信息 行转列与列转行的示意图如下。行转...
列数据转KV
算法简介 将数据格式从多列转成Key:Value格式，用户可以指定Key之间的分隔符和Key与Value之间的分隔符。转换之后，多列数据转换为一列。可视化配置参数【输入桩配置】输入桩（从左到右）限制数据类型 建议上游组件 是否必选 数据 无 读数据...
Table2KV
您可以在结果表中指定需要保留的列，并且输出的列与原表的列一致。如果存在输入Key_map表，则转化的列为Key_map表与KV表中Key的交集。如果存在的输入Key_map表与输入表类型冲突，则输出的Key_map表使用您指定的类型。输入表中需要转换为KV...
类型转换
您可以将任意类型特征转成STRING、DOUBLE和INT特征，并支持转换异常时的缺失值填充。背景信息 支持将表的字段类型转成另一个类型。支持多个字段同时转换成不同的类型。支持ODPS2.0数值类型字段的转换，例如decimal，float，int。说明 该...
向量聚合
向量聚合组件，可以将多个数值列或者向量，聚合成一个向量。使用限制 支持的计算引擎为MaxCompute和Flink。算法简介 向量聚合组件，将多个数值列或者vector列转换成一个向量。可视化配置参数【输入桩配置】输入桩（从左到右）限制数据类型 ...
行列转换
行转列 方法一：通过CASE WHEN语句 SELECT username,max(CASE WHEN subject='语文' THEN score END)AS `语文`,max(CASE WHEN subject='数学' THEN score END)AS `数学`,max(CASE WHEN subject='英语' THEN score END)AS `英语` FROM pivot ...
Lateral View
page|3|f|contact_page|4|d|contact_page|4|e|contact_page|4|f|contact_page|5|d|contact_page|5|e|contact_page|5|f|+-+-+-+相关参考 在实际业务开发过程中，如果您遇到行转列或列转行需求，除了可以借鉴上述Lateral View方法外，还可以...
Lateral View
page|3|f|contact_page|4|d|contact_page|4|e|contact_page|4|f|contact_page|5|d|contact_page|5|e|contact_page|5|f|+-+-+-+相关参考 在实际业务开发过程中，如果您遇到行转列或列转行需求，除了可以借鉴上述Lateral View方法外，还可以...
Unpivot 列转行
month))'select distinct se_month from tbl_sellers_info order by 1')as-crosstab 输出格式(js jsonb,-第一个参数SQL内对应的order by对应的字段（1个或多个）Jan numeric,-第一个参数SQL内对应导数第二个字段的枚举值，（行转列）feb ...
2022年
计算费用（按量计费）2022-03-24 行转列及列转行最佳实践 新增 新增行转列及列转行最佳实践。基于示例为您介绍如何使用SQL实现行转列、列转行需求。行转列及列转行最佳实践 2022-03-18 支持开源格式数据 更新说明 补充PARQUET属性：parquet...
数据加工
行转列 拖入需要转置的列，会自动显示该列的枚举值，默认全部勾选。说明 最多可添加1个需要转置的列。拖入填充列。转置效果。转置前 转置后 列转行 拖入需要转置的列。说明 最多可添加10个需要转置的列。转置效果。转置前 转置后 查看数据...
修改表
利用这些命令，我们可以进行以下操作：增加列 移除列 增加约束 移除约束 修改默认值 修改列数据类型 重命名列 重命名表 增加列 执行以下命令，增加一个列：ALTER TABLE products ADD COLUMN description text;新列将被默认值所填充（如果...
列式JSONB
原因在于底层已经将JSONB数据转成了列式存储，所以当需要查询出完整JSON数据的时候，就需要将那些已经列式存储的数据再重新拼装成原来的JSONB格式：这个步骤就会产生大量的IO以及转换开销，如果涉及到的数据量很大，列数又很多，甚至可能...
Quick BI如何将数据源中报表的某一维度实现行列转换
详细信息 在SQL创建数据集中，使用SQL将数据集中的数据进行行转列处理。以上图数据表为例，将subject字段实现行转列，SQL如下：SELECT province,CASE `subject` WHEN '生物' THEN score ELSE 0 END as '生物',CASE `subject` WHEN '数学' ...
列存索引技术架构介绍
同时该阶段获得的逻辑执行计划会转给IMCI的执行计划编译模块，并尝试生成一个列存的执行计划（此处可能会被白名单拦截并回滚回行存）。PolarDB 的Optimizer会根据行存计划，计算得出一个面向行存的执行Cost。如果此Cost超过一定阈值，则会...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
PolarDB HTAP实时数据分析技术解密
同时该阶段获得的逻辑执行计划转给IMCI的执行计划编译模块后，会尝试生成一个列存的执行计划（此处可能会被白名单拦截并fallback回行存）。PolarDB的Optimizer会根据行存的Plan，计算得出一个面向行存的执行Cost。如果此Cost超过一定阈值，...
Collection
print(iris.dtypes)返回结果：odps.Schema { sepallength float64 sepalwidth float64 petallength float64 petalwidth float64 name string } 列选择和增删 列选择 如果您需要从一个CollectionExpr中选取部分列，产生新的数据集，可以使用...
CREATE TABLE
当聚集索引键涉及多个列时，数据会先根据第一个列的值排序，在第一个列的值相同时，按第二个列的值进行次级排序。所以 CLUSTERED KEY index(id,name)与 CLUSTERED KEY index(name,id)是不同的聚集索引。如果字段值较长，例如长达十几KB或几...
PIVOT、UNPIVOT
MaxCompute支持PIVOT和UNPIVOT关键字，通过PIVOT关键字可以基于聚合将一个或者多个指定值的行转换为列；通过UNPIVOT关键字可以将一个或者多个列转换为行。本文为您介绍PIVOT和UNPIVOT关键字的使用和示例。PIVOT关键字 PIVOT关键字对于指定...
PIVOT、UNPIVOT
MaxCompute支持PIVOT和UNPIVOT关键字，通过PIVOT关键字可以基于聚合将一个或者多个指定值的行转换为列；通过UNPIVOT关键字可以将一个或者多个列转换为行。本文为您介绍PIVOT和UNPIVOT关键字的使用和示例。PIVOT关键字（灰度中）PIVOT关键字...
ALTER TABLE
ADD GENERATED { ALWAYS|BY DEFAULT } AS IDENTITY SET GENERATED { ALWAYS|BY DEFAULT } DROP IDENTITY[IF EXISTS]这些形式更改一列是否是一个标识列，或者是更改一个已有的标识列的产生属性。详情请参考 CREATE TABLE。像 SET DEFAULT ...
更改列存表的数据存储格式
从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据...
朴素贝叶斯
页签 参数 描述 字段设置 特征列 默认为除标签列外的所有列，支持DOUBLE、STRING及BIGINT数据类型。排除列 不参与训练的列，不能与 选择特征列 同时使用。强制转换列 解析规则如下：STRING、BOOLEAN及DATETIME类型的列，解析为离散类型。...
概述
PolarDB-X 列存索引，基于分布式事务的Binlog日志实时同步，实现行转列（M:N）的异构转换，同时可以定义列存索引特有的分布式分区键、排序键等，结合分布式的并行技术，提供列存查询的线性扩展能力。同时行存和列存存储介质相互隔离，存储...
随机森林
页签 参数 描述 字段设置 选择特征列 默认为除标签列和权重列外的所有列。排除列 不参与训练的列，不能与 选择特征列 同时使用。强制转换列 解析规则如下：STRING、BOOLEAN及DATETIME类型的列，解析为离散类型。DOUBLE和BIGINT类型的列，...
列数据转向量
算法简介 将数据格式从列数据转成Vector，数据格式必须为数值类型。可视化配置参数【输入桩配置】输入桩（从左到右）限制数据类型 建议上游组件 是否必选 数据 数值类型 读数据表 读CSV文件 是【右侧参数表单】页签 参数 描述 字段设置 ...
包年包月转按量付费
找到目标实例，通过以下两种方式均可进入 包年包月转按量付费 页面：在目标实例右侧 付费类型 列单击 转按量付费。单击实例ID，在 运行状态 区域的 计费方式 右侧单击 转按量付费。确认实例信息后勾选服务协议，单击 去支付 完成支付即可。...
Stream Load
如果原始表的src_c1列对应目标表dst_c1列，原始表的src_c2列对应目标表dst_c2列，原始表的src_c3列对应目标表dst_c3列，则写法为 columns:dst_c1,dst_c2,dst_c3。如果原始表的src_c1列对应目标表dst_c2列，原始表的src_c2列对应目标表dst_c...
CREATE TABLE AS（CTAS）语句
添加非空列：会自动在结果表Schema末尾添加对应的列，并自动同步新增列的数据，新增的列会默认设置为可空列，对于添加列发生之前的数据自动设置为NULL值。重命名列：被看作为添加列和删除列。直接在结果表中末尾添加重命名后的列，并将重...
SHOW COLUMNAR STATUS
答：用户无需关心ID列，它只是对应每一个列存索引的唯一标识，具有全局唯一性，用于列存内核区分列存索引，解决列存索引名称相同，删除列存索引再建相同列存索引等问题，列存索引删除再建时尽管名称相同，唯一标识ID会不同。列存索引的ROWS...
CREATE INDEX
Lindorm提供了 三种 高效易用的索引：二级索引、搜索索引和列存索引，分别适用于非主键匹配场景、多维查询场景 和列存储数据查询场景。在使用CREATE INDEX语法创建索引时，您可以指定索引类型并添加索引属性。引擎与版本 CREATE INDEX语法...
2.0版SQL开发规范
云原生数据仓库AnalyticDB MySQL版 2.0集群是一个分布式、列存数据库，在编写和优化SQL时，需要充分考虑其分布式特性。在2.0集群中，编写和优化SQL的要求和经验总结如下：SQL编写原则为追求简单 一般情况下，数据库性能会随SQL复杂度而下降...
CREATE TABLE（AUTO模式）
前缀分区列：若一个向量分区键由N（N>1）个分区列组成，它的前K（1）个分区列便组成这个向量分区键的前缀分区列。分区函数：将分区列作为一个函数的输入参数，并将该函数的输出结果作为原始值参与路由计算，该函数被称为分区函数。分区裁剪...
配置说明
string类型和binary类型的主键列列值限制均为1 KB，属性列列值限制均为2 MB。更多信息，请参见 通用限制。如果数据类型转换后列值超出对应限制，则将该Kafka Record作为脏数据处理。如果使用默认的DefaultEventParser解析器，Kafka Record...
普通列
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 普通列的支持转换范围。总览 column_definition:column[datatype[COLLATE column_collation_name]][SORT][VISIBLE|INVISIBLE][DEFAULT[ON NULL]...
虚拟列
本文为您介绍迁移 Oracle 数据库的数据至 OceanBase 数据库 Oracle 租户时，CREATE TABLE DDL 虚拟列的支持转换范围。总览 virtual_column_definition:column[datatype[COLLATE column_collation_name]][VISIBLE|INVISIBLE][GENERATED ...
随机森林特征重要性
页签 参数 描述 字段设置 选择特征列 输入表中，用于训练的特征列。默认选中除Label外的所有列，为可选项。选择目标列 该参数为必选项。单击 图标，在 选择字段 对话框中，输入关键字搜索列，选中后单击 确定。参数设置 并行计算核数 并行...
- 产品推荐
- 这些文档可能帮助您