2.0数据类型版本
本文为您介绍MaxCompute 2.0数据类型版本的定义、使用场景、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为2.0数据类型版本时，项目空间的数据类型属性参数定义如下。setproject odps.sql.type.system.odps...
1.0数据类型版本
MaxCompute 1.0数据类型版本是MaxCompute三种数据类型版本之一，该数据类型版本仅支持1.0数据类型。本文为您介绍1.0数据类型版本的设置方法、支持的数据类型以及与其它数据类型版本的差异。定义 项目空间选择数据类型版本为1.0数据类型版本...
组件与数据类型的兼容
不支持 不支持 PAI 支持除Decimal之外的其它数据类型 2.0新增的数据类型中仅支持INT 部分功能支持map数据类型 不支持 不支持 PyODPS 支持 DataFrame不支持2.0数据类型 其它功能都支持2.0数据类型 支持 DataFrame不支持2.0数据类型 其它功能...
与Hive、MySQL、Oracle数据类型映射表
在进行数据迁移或集成操作时，即当您需要将其他数据库数据导入MaxCompute或将MaxCompute数据导出至其他数据库时，您需要参照数据类型映射表，设置表字段的数据类型映射关系。正确的数据类型映射关系可以确保数据在不同数据库中能够正确地...
日期数据格式转换：STRING、TIMESTAMP、DATETIME互相...
本文为您介绍STRING、TIMESTAMP与DATETIME类型数据间的转换方法，帮助您在实际业务处理过程中，快速对标找到合适的日期转换方法，提升业务处理效率。日期数据格式转换常见场景如下：STRING转换为TIMESTAMP STRING转换为DATETIME TIMESTAMP...
MaxCompute TIMESTAMP_NTZ数据类型
有如下的片段，说明输出结果中current_result/from_result/to_result这3个字段的数据类型是TIMESTAMP_NTZ类型 FS:output:Screen schema:current_result(timestamp_ntz)from_result(timestamp_ntz)to_result(timestamp_ntz)支持的运算 关系...
数据类型正确性冒烟测试
测试结论 Proxima CE目前支持的数据类型如下：只支持 FLOAT、INT8、BINARY 类型（对应aitheta2的 FT_FP32、FT_INT8、FT_BINARY32）。不支持 DOUBLE、INT16 类型（对应aitheta的 FT_FP64、FT_INT16）。上述类型运行正常，后续考虑支持 FLOAT...
复杂数据类型上传下载示例
本文为您介绍如何通过Tunnel SDK上传或下载复杂数据类型。MaxCompute支持ARRAY、MAP和STRUCT这3种复杂数据类型，具体用法请参见 数据类型版本说明。上传复杂类型数据 代码示例 RecordWriter recordWriter=uploadSession.openRecordWriter(0...
UDF示例：复杂数据类型
本文为您介绍如何在Java UDF和Python UDF中使用复杂数据类型。命令说明 本示例将注册一个名称为 UDF_COMPLEX_DATA 的自定义函数。说明 本示例将介绍array、map、struct三种复杂数据类型的使用。Java UDF通过重载的方式使用同一个自定义函数...
数据类型版本说明
MaxCompute目前提供了三种不同类型的数据类型版本，包括1.0数据类型、2.0数据类型以及Hive兼容数据类型，您可以根据业务需求选择合适的数据类型版本。本文为您介绍三种数据类型版本、选择数据类型版本以及查看和修改项目的数据类型版本。...
常见问题
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
继承和转换
背景信息 数据类型转换的映射表存在客户端安装目录./Datablau/DDM/Datatypes 文件夹下的Datatypes.xlsx中。操作步骤 单击工具栏中的 继承和转换。页面弹出的对话框中，模型类型 显示的为当前模型的类型，当前模型 显示的该模型的名称和位置...
SQL其他常见问题
本文为您介绍在MaxCompute中执行SQL时，与数据类型、SQL限制等相关的常见问题。问题类别 常见问题 数据类型 MaxCompute的时间类型字段是否可以不带时分秒？在执行MaxCompute SQL过程中，对DOUBLE类型的数据进行等值比较，为什么结果不符合...
MaxCompute JSON类型使用指南
同时相比于用户自定义UDF，新的JSON数据类型对于STRING和JSON相互转换效率也有较大提高。JSON类型使用 说明 当前在新版的MaxCompute项目中，odps.sql.type.json.enable 参数默认为true，而在存量MaxCompute项目中，odps.sql.type.json....
Hive兼容数据类型版本
Hive兼容数据类型版本是MaxCompute三种数据类型版本之一，该数据类型版本下仅支持Hive兼容数据类型。本文为您介绍Hive兼容数据类型版本的定义、支持的数据类型以及与其他数据类型版本的差异。定义 项目空间选择数据类型版本为Hive兼容数据...
数据类型转换
MaxCompute SQL允许数据类型之间的转换，类型转换方式包括显式类型转换和隐式类型转换。显式类型转换 显式类型转换是通过 CAST 函数将一种数据类型的值转换为另一种类型的值，在MaxCompute SQL中支持的显式类型转换，如下表所示。关于CAST...
导入与导出
数据同步过程中，可以修改源表中的字段类型，目前仅支持整型数据类型之间、浮点数据类型之间的列类型更改，并且只能将取值范围小的数据类型更改为取值范围大的数据类型，或者将单精度数据类型更改为双精度数据类型。整型数据类型：支持...
数据源支持概述
本文介绍Spark SQL支持的数据源类型，以及支持数据源的方式。支持的数据源 数据源 批量读 批量写 流式读 流式写 Kafka 有 无 有 有 Loghub 有 有 有 有 Tablestore 有 有 有 有 DataHub 无 无 有 有 HBase 有 有 无 有 JDBC 有 有 无 有 ...
CreateUdfFile
调用CreateUdfFile，在数据开发中创建函数类型文件。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
附录：DataHub消息格式
本文为您介绍DataHub不同数据类型对应操作的支持情况，不同数据类型的分片策略、数据格式及相关消息示例。不同数据类型对应操作的支持情况 Topic是DataHub订阅和发布的最小单位，用户可以用Topic来表示一类或者一种流数据。目前支持Tuple与...
ClickHouse数据源
支持的字段类型 支持阿里云ClickHouse以下常见的数据类型，阿里云ClickHouse的数据类型全集请参见 数据类型，开源ClickHouse官方数据类型集合中的其他类型暂不支持，开源ClickHouse数据类型全集请参见 ClickHouse Doc。数据类型 ClickHouse...
产品简介
服务内容 服务大类 服务类型 服务内容 大数据专家咨询服务 大数据技术架构方案咨询 为客户提供构建和优化大数据体系的技术架构方案咨询服务，覆盖离线/实时数仓体系建设管理、数仓建模管理，数据开发管理，数据安全管理、数据质量管理、...
Amazon Redshift数据源
Amazon Redshift数据源为您提供读取和写入Amazon Redshift的双向通道，方便您后续可以通过向导模式和脚本模式配置数据同步任务。本文为您介绍Amazon Redshift数据同步能力支持情况。支持的Amazon Redshift版本 Amazon Redshift使用的驱动...
数据服务入门
数据源名称 选择需要基于该类型数据源下的哪个数据源生成API。本文示例选择 步骤一：创建数据源并配置网络连通性 创建的 rds_workshop_log 数据源。数据源环境 标准模式工作空间支持选择访问开发或生产环境数据源，两种环境的区别，详情请...
水波图
也可以修改 数据类型，灵活配置组件数据。数据映射 当您需要自定义图表字段配置时，可以在 数据映射 模块设置不同的字段映射内容，将这些字段映射到组件对应的字段上。无需修改数据源中的字段，就可以实现数据的实时匹配。也可以单击 图标...
MongoDB数据源
支持的字段类型 MongoDB Reader支持的MongoDB数据类型 数据集成支持大部分MongoDB类型，但也存在部分没有支持的情况，请注意检查您的数据类型。对于支持读取的数据类型，数据集成在读取时：基本类型的数据，会根据同步任务配置的读取字段...
Sensors Data（神策）数据源
示例"dataConverters":[{"type":"Date2Str","param":{"pattern":"yyyy-MM-dd"} }]pattern（可选）：将Date数据转换为String类型数据后，String类型数据的时间格式。Date2Long 将Date时间类型的数据转换为Long长整型类型。dataConverters":...
数据类型
本文介绍了 PolarDB-X 1.0 支持的数据类型。PolarDB-X 1.0 支持四种主要数据类型：数值类型 字符串类型 日期时间类型 JSON 数据类型 不支持的数据类型：空间数据类型 关于数据类型的详细信息可参考 MySQL 数据类型 文档。
离线同步常见问题
目标端的数据类型定义的大小需要可以接收源端映射字段实际数据大小，源端是long、varchar、double等类型的数据，目的端均可用string、text等大范围类型接纳。脏数据报错不清晰时，需要复制出打印出的脏数据的一整条，观察其中的数据，和...
OSS Foreign Table数据类型对照表
ORC文件数据类型对照表 ORC数据类型 AnalyticDB PostgreSQL版 数据类型 BOOLEAN bool SHORT int2 INT int4 LONG int8 FLOAT float4 DOUBLE float8 DECIMAL numeric CHAR char STRING text BINARY bytea TIMESTAMP timestamp DATE date LIST...
空间数据类型
空间数据类型是一种用来表示空间对象、地理位置和物体形状的数据类型，多用于航空、导航、城市规划等领域。本文介绍Lindorm宽表引擎支持的空间数据类型。适用引擎 空间数据类型仅适用于宽表引擎。空间数据类型 Lindorm Ganos的SQL接口支持...
Hive元数据说明
本文为您介绍E-MapReduce（简称EMR）支持的元数据类型和各元数据类型的优势。元数据类型介绍 EMR Hive元数据支持DLF统一元数据、自建RDS和内置MySQL三种类型。DLF统一元数据 元数据存储在阿里云数据湖构建（Data Lake Formation，简称DLF）...
MaxCompute作业概述
数据类型 MaxCompute数据开发支持三个数据类型版本：1.0数据类型版本、MaxCompute 2.0推出了兼容开源主流产品的 2.0数据类型版本 和 Hive兼容数据类型版本。您可以根据您MaxCompute作业的实际情况选用合适的数据类型版本，详情请参见 数据...
NULL值相关的函数
返回类型 如果所有出现的 expr 都是数字数据类型或任何可以隐式转换为数字数据类型的非数字数据类型，则数据库将确定具有最高数字优先级的参数，隐式将其余参数转换为该数据类型，并返回该数据类型。示例 SELECT coalesce(null,3.934,1)...
快速体验
DataWorks为您提供智能建模、数据清洗、周期调度运维、数据治理等一站式大数据开发管理能力，本文以一个零售电商行业的数仓搭建实验为例，为您介绍DataWorks在数仓搭建过程中的技术选型、技术流程以及流程实现，帮助您深入了解阿里云...
什么是DataWorks
DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台。从2009年起，DataWorks不断沉淀阿里巴巴大数据建设方法论，支撑数据中台建设，同时与...
UTL_RAW
UTL_RAW内置包提供了用于操作RAW类型数据的函数。UTL_RAW子程序总览 子程序 说明 BIT_AND Function 对RAW r1和RAW r2的值按位进行逻辑“与”运算，并返回RAW类型的计算结果。BIT_COMPLEMENT Function 对输入的RAW类型数据的值按位进行逻辑...
数据迁移操作指导
异构数据库间的数据类型映射关系 由于不同的数据库支持的数据类型不一样，数据类型无法完全对应。DTS在执行结构迁移时，会根据目标库支持的数据类型进行类型映射，您可以查阅并评估类型映射对业务的影响。功能特性 详情请参见 数据迁移。...
构建数据仓库
DataWorks具有通过可视化方式实现数据开发、治理全流程相关的核心能力，本文将为您介绍DataWorks在构建云上大数据仓库和构建智能实时数据仓库两个典型应用场景下的应用示例。构建云上大数据仓库 本场景推荐的架构如下。适用行业：全行业...
定义敏感数据
为了能够明确区分普通数据和敏感数据，全密态数据库为敏感数据单独定义了新的数据类型，并提供了常用的SQL算子。更多敏感数据类型及其SQL算子请参见 支持的数据类型和相关算子。全新定义敏感数据 您需要根据业务场景特性，判断哪些数据属于...
- 产品推荐
- 这些文档可能帮助您