函数列表
配置云产品流转过程中，您可以在编写解析器脚本时使用数据类型转换函数、时间类型转换函数、基础数据类型函数和流转数据到数据目的函数等方法，实现数据多样化处理。本文介绍相关函数的表达式及其使用说明。除本文支持的函数表达式外，云...
异构数据源访问
若您需要通过 AnalyticDB PostgreSQL版 访问外部异构数据源（HDFS、Hive和JDBC）时，可以使用异构数据源访问功能将外部数据转换为 AnalyticDB PostgreSQL版 数据库优化后的格式进行查询和分析。功能说明 外部数据源管理提供高性能的结构化...
Cassandra数据类型
map map数据类型包含了key/value键值对。key和value可以是任何类型，除了counter类型。使用如下：cqlsh:test_keyspace>ALTER TABLE test_user ADD login_sessions map,int>;cqlsh:test_keyspace>UPDATE test_user SET login_sessions={now...
Map
3.1.1及以后版本的 AnalyticDB for MySQL 集群支持Array、Map数据类型。本文介绍了Map数据类型的定义、注意事项及使用示例。Map类型定义 Map类型，存储 k-v 键值对，含义类似Java中的Map。其中key类型要求是原生类型（如 tinyint、boolean...
Hive连接器
将全部Hive数据类型正确映射到Presto类型。处理自定义UDF的能力。配置属性 Hive配置属性 Hive连接器支持使用Jindo Table加速。EMR集群中内置了两个Hive连接器，分别为 hive.properties 和 hive-acc.properties。hive-acc.properties 内置了...
Flag参数列表
关于兼容数据类型的更多信息，请参见 Hive兼容数据类型版本。True：打开。False：关闭。ALL SQL Session/Project odps.sql.metering.value.max 设置单SQL消费限制值。关于消费者监控的更多信息，请参见 消费监控告警。ALL SQL Session/...
SETPROJECT
关于兼容数据类型的更多信息，请参见 Hive兼容数据类型版本。True：打开。False：关闭。ALL SQL Session/Project odps.sql.metering.value.max 设置单SQL消费限制值。关于消费者监控的更多信息，请参见 消费监控告警。ALL SQL Session/...
数据类型版本说明
MaxCompute目前提供了三种不同类型的数据类型版本，包括1.0数据类型、2.0数据类型以及Hive兼容数据类型，您可以根据业务需求选择合适的数据类型版本。本文为您介绍三种数据类型版本、选择数据类型版本以及查看和修改项目的数据类型版本。...
MaxCompute作业概述
数据类型 MaxCompute数据开发支持三个数据类型版本：1.0数据类型版本、MaxCompute 2.0推出了兼容开源主流产品的 2.0数据类型版本 和 Hive兼容数据类型版本。您可以根据您MaxCompute作业的实际情况选用合适的数据类型版本，详情请参见 数据...
配置Hive输出组件
同步其他数据源的数据至Hive数据源的场景中，完成源数据源的信息配置后，需要配置Hive输出组件写入数据的目标数据源。本文为您介绍如何配置Hive输出组件。使用限制 Hive输出组件支持写入文件格式为 orc、parquet、text、iceberg（iceberg...
SUBSTR
Hive兼容数据类型版本：当 start_position 为0时，与起始位置为1时相同。1.0和2.0数据类型版本：当 start_position 为0时，返回NULL。length：可选。BIGINT类型，表示子串的长度值。值必须大于0。重要 如果 setproject odps.function....
概述
本文为您介绍在MaxCompute Studio上开发SQL脚本的...Hive类型系统：Hive兼容数据类型版本系统。执行模式 默认：MaxCompute Studio默认使用的编译器。查询加速：具备查询加速功能的编译器。加速失败重跑：查询加速失败后可以重跑作业的编译器。
配置Hive输入组件
同步Hive数据源的数据至其他数据源的场景中，您需要先配置Hive输入组件读取的数据源，再配置数据同步的目标数据源。本文为您介绍如何配置Hive输入组件。使用限制 Hive输入组件支持数据格式为 orc、parquet、text、rc、seq、iceberg...
Hive兼容数据类型版本
基础数据类型 Hive兼容数据类型版本支持的基础数据类型与2.0数据类型定义基本一致，只有DECIMAL数据类型在两个版本下有些差异。类型 常量示例 描述 TINYINT 1Y、-127Y 8位有符号整型。取值范围：128~127。SMALLINT 32767S、-100S 16位有...
Hive数据导入
参数说明如下表所示：阿里云实例 参数名称 参数说明 数据源类型 选择数据源类型 Hive。数据源名称 系统默认会按数据源类型与当前时间生成名称，可按需修改。数据源描述 数据源备注描述，例如湖仓应用场景、应用业务限制等。部署模式 如果您...
项目空间操作
Hive兼容数据类型详情请参见 Hive兼容数据类型版本。true：打开 false：关闭 odps.sql.decimal.odps2 DECIMAL 2.0数据类型 DECIMAL(precision,scale)开关。详情请参见 2.0数据类型版本。true：打开 false：关闭 odps.timemachine.retention...
UNNEST子句
y 数据类型为map类型。key_name 将map类型的数据展开后，指定一个列名。该列用于存放map中的键。value_name 将map类型的数据展开后，指定一个列名。该列用于存放map中的键值。示例 示例1 将 number 字段的值（array类型）展开为多行单列...
Hive数据源
离线读 类型分类 Hive数据类型 字符串类 CHAR、VARCHAR、STRING 整数类 TINYINT、SMALLINT、INT、INTEGER、BIGINT 浮点类 FLOAT、DOUBLE、DECIMAL 日期时间类 TIMESTAMP、DATE 布尔型 BOOLEAN 数据同步前准备 不同的数据源配置模式，准备...
Sensors Data（神策）数据源
示例"dataConverters":[{"type":"Str2BigDecimal"}]无 IfNull2Default 当字段值为null时，将字段值设置为default参数中定义的常量值，并支持根据IfNull2Default转换器中嵌套的转换器类型，进一步将字段常量值转换为目标数据类型。...
基础数据类型
本文介绍 云原生数据仓库AnalyticDB MySQL版 支持哪些数据...AnalyticDB MySQL支持的复杂数据类型 Array Map JSON AnalyticDB MySQL不支持的数据类型 云原生数据仓库AnalyticDB MySQL版 不支持的数据类型，请参见 不支持的数据类型及运算符。
2020年
数据类型版本说明 1.0数据类型版本 2.0数据类型版本 Hive兼容数据类型版本 组件与数据类型的兼容 2020-03-25 新增概览页面和查看历史作业快照功能。新功能 新增概览页面和查看历史作业快照功能。MaxCompute管家 2020-03-20 新增支持...
GetMetaDBInfo
DataSourceType String 否 emr 数据类型，包括odps和emr。返回数据 名称 类型 示例值 描述 RequestId String 0bc1411515937*请求ID。Data Object 业务数据。Type String hive 数据库类型 Comment String 备注 备注 CreateTime Long ...
存储加密
数据类型 MaxCompute数据类型包含 1.0数据类型、2.0数据类型 和 Hive兼容类型。您需要根据业务情况选择合适的数据类型版本，三种数据类型版本的区别请参见 数据类型版本说明。是否加密 选择 需要加密，指定创建的MaxCompute项目开启数据...
管理数据库
Hive 参数 说明 数据库类型 Hive 名称 新建数据库的名称，长度限制为1~64个字符，只允许包含中文、字母、数字、空格、短划线（-）和下划线（_）。网络类型 仅支持专有网络类型。专有网络 默认展示工作空间配置的网络参数，不支持修改。为了...
项目管理（新版）
数据类型 MaxCompute数据类型包含 1.0数据类型、2.0数据类型 和 Hive兼容类型。您需要根据业务情况选择合适的数据类型版本，三种数据类型版本的区别请参见 数据类型版本说明。是否加密 指定创建的MaxCompute项目是否需要开启数据加密功能。...
UDF示例：复杂数据类型
说明 本示例将介绍array、map、struct三种复杂数据类型的使用。Java UDF通过重载的方式使用同一个自定义函数名。Python UDF需要分别注册 UDF_COMPLEX_DATA_ARRAY、UDF_COMPLEX_DATA_MAP 和 UDF_COMPLEX_DATA_STRUCT 实现上述三种数据类型的...
大数据AI公共数据集分析
数据类型 MaxCompute数据类型包含 1.0数据类型、2.0数据类型 和 Hive兼容类型。本教程选择：2.0数据类型。是否加密 指定创建的MaxCompute项目是否需要开启数据加密功能。更多数据加密信息，请参见 存储加密。本教程选择：不加密。完成配置...
搭建与管理（基于Hadoop）
如果未开通，建议开通时设置MaxCompute数据类型为Hive兼容。通过MaxCompute与Hadoop构建湖仓一体时，Hadoop集群所使用的VPC和MaxCompute服务开通地域保持一致，这样可以免去跨地域网络产生的费用。当您通过MaxCompute与Hadoop构建湖仓一体...
开启native查询加速
说明 目前使用Hive查询加速功能时，暂不支持复杂数据类型，例如Map、Struct或Array。全局设置Spark 进入Spark页面。登录 阿里云E-MapReduce控制台。在顶部菜单栏处，根据实际情况选择地域 和资源组。单击上方的 集群管理 页签。在 集群管理...
开启native查询加速
JindoTable通过Native Engine，支持对Spark、Hive或Presto上ORC或Parquet格式文件进行加速。本文为您介绍如何开启native查询加速，以提升Spark、...说明 目前使用Hive查询加速功能时，暂不支持读取复杂的数据类型，例如Map、Struct或Array。
开启native查询加速
JindoTable通过Native Engine，支持对Spark、Hive或Presto上ORC或Parquet格式文件进行加速。本文为您介绍如何开启native查询加速，以提升Spark、...说明 目前使用Hive查询加速功能时，暂不支持读取复杂的数据类型，例如Map、Struct或Array。
开启native查询加速
JindoTable通过Native Engine，支持对Spark、Hive或Presto上ORC或Parquet格式文件进行加速。本文为您介绍如何开启native查询加速，以提升Spark、...说明 目前使用Hive查询加速功能时，暂不支持读取复杂的数据类型，例如Map、Struct或Array。
函数列表
函数列表包括数据类型转换函数、时间类型转换函数和基础数据类型的函数等。本文介绍函数的表达式及其使用说明。背景信息 您可结合支持的脚本语法，调用函数将设备自定义Topic数据存储到物联网平台的时序数据存储空间。脚本的使用说明，请...
使用DLF元数据
支持的数据源类型有hive、hudi、iceberg、deltalake。dlf.catalog.id 否 待读取的DLF Catalog ID。如果不添加该配置，则使用默认DLF Catalog。hive.metastore.type 是 配置MetaStore类型。固定值为DLF。查询数据。通过SHOW DATABASES查看...
快速使用EMR Notebook
参数 说明 数据库类型 选择Hive。本文以Hive类型为例。名称 新建数据库的名称，长度限制为1~64个字符，只允许包含中文、字母、数字、空格、短划线（-）和下划线（_）。本示例为demo_hive。网络类型 仅支持专有网络类型。专有网络 默认展示...
MAP_CONCAT
多个MAP对象的参数数据类型必须一致。map,V>中的 K、V 指代MAP对象的Key、Value。返回值说明 返回MAP类型。返回规则如下：某个MAP对象为NULL或某个MAP对象的Key为NULL时，返回 NULL 或报错。多个MAP对象的数据类型不一致时，返回报错。使用...
Catalog概述
例如，数据源类型和Hive MetaStore的URI等。在StarRocks中，您可以通过External Catalog直接查询外部数据。目前支持创建以下数据源的External Catalog：Hive数据源：用于查询Hive数据。Iceberg数据源：用于查询Iceberg数据。Hudi数据源：...
SQL
SQL任务类型，用于连接数据库并执行...SQL任务节点设置中，数据源类型选择为 HIVE，数据源实例 选择已添加的HIVE数据源（与上述非查询类SQL任务示例中选择的数据源保持一致），SQL类型 选择为 查询，SQL语句 内容如下。select*from hive_table
UDF开发（Java）
附录：数据类型 数据类型映射 为确保编写Java UDF过程中使用的数据类型与MaxCompute支持的数据类型保持一致，您需要关注二者间的数据类型映射关系。具体映射关系如下。说明 在MaxCompute中不同数据类型版本支持的数据类型不同。从...
节点类型说明
本文按照节点离线、在线和流式的分类，分别介绍各节点类型对应能处理的数据类型以及运行引擎。计算类节点 计算类节点分为离线类、在线和流式类节点主要用于处理各种不同的数据。节点分类 节点说明 离线节点 更多详细信息，请参见 离线类...
- 产品推荐
- 这些文档可能帮助您