2024年
StarRocks Connector 2024-03-22 新增FROM_CHARSET 新说明 MaxCompute FROM_CHARSET支持将指定编码格式的二进制数据转换为UTF-8格式的字符串，以便后续进行计算时使用。FROM_CHARSET 2024-03-21 新增MaxCompute TIMESTAMP_NTZ数据类型介绍 ...
使用OSS Foreign Table导出数据
gzip：读取原始二进制数据并使用GZIP解压缩。说明 仅支持CSV和TEXT格式的文件。fragment_size 数值 否 导出到OSS的文件的大小。单位为MB，默认值为256。当导出到OSS的文件大小超过该值时，系统会切分到新的文件，向新文件中继续写入数据。...
使用OSS Foreign Table进行数据湖分析
snappy：读取原始二进制数据并使用SNAPPY解压缩。仅支持标准格式的SNAPPY压缩，暂不支持HADOOP-SNAPPY压缩文件。说明 filetype参数仅支持CSV、TEXT、JSON和JSONLINE格式的文件。其中snappy选项不支持JSON和JSONLINE格式的文件。log_errors ...
表概述
BINARY 是 无 二进制数据类型。长度限制为8 MB。DATETIME 否 DATETIME '2017-11-11 00:00:00' 日期时间类型，使用东八区时间作为系统标准时间。范围：0000年1月1日~9999年12月31日，精确到毫秒。TIMESTAMP 是 TIMESTAMP '2017-11-11 00:00:...
GetRow
Filter 经过protobuf序列化后的二进制数据。start_column string 否 指定读取时的起始列，主要用于宽行读。列的顺序按照列名的字典序排序。返回的结果中包含当前起始列。如果一张表有a、b、c三列，读取时指定start_column为b，则会从b列...
数仓分层
其中，明细事实数据、维表数据一般根据ODS层数据加工生成。公共指标汇总数据一般根据维表数据和明细事实数据加工生成。CDM层又细分为维度层（DIM）、明细数据层（DWD）和汇总数据层（DWS），采用维度模型方法作为理论基础，可以定义维度...
快速入门
分隔符BLOB数据同步时，可以指定16进制分隔符来决定是否对BLOB数据分割后再同步MaxCompute，比如 0A 表示（换行符）Base64编码DataHub BLOB默认存储二进制数据，而MaxCompute对应的同步列为STRING类型，因此管控台创建同步任务时，默认采用...
Hive兼容数据类型版本
BINARY unhex('FA34E10293CB42848573A4E39937F479')二进制数据类型，目前长度限制为8MB。FLOAT cast(3.14159261E+7 as float)32位二进制浮点型。DOUBLE 3.14159261E+7 64位二进制浮点型。DECIMAL(precision,scale)3.5BD、99999999999....
DBMS_LOB
CONVERTTOCLOB(dest_lob IN OUT,src_blob,amount,dest_offset IN OUT,src_offset IN OUT,blob_csid,lang_context IN OUT,warning OUT)存储过程 N/A 将二进制数据的大对象转换成字符型数据的大对象。COPY(dest_lob IN OUT,src_lob,amount[,...
使用mysqldump导入导出数据
如果有二进制数据就必须使用本选项。影响的字段类型包括 BINARY、VARBINARY、BLOB。❌-no-data 不导出数据。❌ table 指定导出某个表。默认导出该数据库所有的表。❌ 修改建表语句。从MySQL导出的数据文件包含每个表的建表语句。如果直接在...
Cassandra数据类型
这个类型在存储媒体或者其他二进制数据类型时很有用，Cassandra并不会检查其中存储的二进制数据是否有效。Cassandra中二进制大对象是以十六进制存储的，如果想将任意的文本数据类型使用blob存储，可以使用textAsBlob()函数实现。inet：这个...
2.0数据类型版本
BINARY unhex('FA34E10293CB42848573A4E39937F479')X'616263' 二进制数据类型，目前长度限制为8 MB。说明 X'num[.]' 格式中 num 是16进制的数字，可以是 0~9 或者是 A~F。例如 X'616263'，实际代表的是 abc，因为字符 a 的ASCII编码是 0x61...
使用mysqldump导入导出数据
如果有二进制数据就必须使用本选项。影响的字段类型包括BINARY、VARBINARY、BLOB。no-data 不导出数据。table 指定导出某个表。默认导出该数据库所有的表。no-create-info 不导出建表信息。net_buffer_length 传输缓冲区大小。影响Insert...
2020年
ST_AsGeometry 2020年9月 新增ST_AsBinary函数，用于将网格数据类型转换为二进制数据类型。ST_AsBinary 2020年9月 新增ST_AsBox函数，用于将网格数据量类型转换为BOX数据类型。ST_AsBox 2020年9月 新增ST_AsGrid函数，用于计算几何数据类型...
UTL_RAW
返回值 返回值 说明 VARCHAR2 包含和输入的RAW类型数据相同的二进制数据。示例 该示例展示了如何将RAW类型的数据转为VARCHAR2类型的数据。SELECT utl_raw.cast_to_varchar2(utl_raw.cast_to_raw('ABCDEFGHIJKLMNOPQRSTUVWXYZ'))FROM dual;...
DataWorks On CDP/CDH使用说明
一、数据集成 DataWorks的数据集成模块为您提供读取和写入数据至CDP/CDH Hive、CDP/CDH HBase的能力，您需要将Hive或HBase组件创建为 DataWorks的 Hive或HBase数据源，实现将其他数据源的数据同步至Hive或HBase数据源，或将Hive或HBase数据...
DataWorks On EMR使用说明
数据地图概述 安全中心 数据保护伞 审批中心 安全中心是集数据资产分级分类、敏感数据识别、数据授权管理、敏感数据脱敏、敏感数据访问审计、风险识别与响应于一体的一站式数据安全治理界面，帮助用户落地数据安全治理事项。安全中心概述 ...
2020年
ST_AsGeometry 新增ST_AsBinary函数，用于将网格数据类型转换为二进制数据类型。ST_AsBinary 新增ST_AsBox函数，用于将网格数据量类型转换为BOX数据类型。ST_AsBox 新增ST_AsGrid函数，用于计算几何数据类型所对应的几何网格数据。ST_...
功能特性
按时计费 数据传输费用 数据公网下载 MaxCompute仅对公网的下载数据进行收费，并按照下载的数据大小按量计费。数据公网下载 数据传输独享资源 数据传输服务（包年包月）资源组是MaxCompute为满足部分客户数据传输的需求推出的独享资源组，...
结构初始化涉及的数据类型映射关系
不同类型的数据库（异构数据库）支持的数据类型不一样，DTS在进行异构数据库之间的数据同步时，会在结构初始化阶段进行数据类型映射，即将源库中的数据类型转为目标库支持的数据类型。本文为您列出详细数据类型映射关系，便于您查阅和评估...
同步 OceanBase 数据库的数据至 DataHub
BLOB 类型的 Topic 仅支持写入一块二进制数据作为一个 Record，数据将会以 BASE64 编码传输。详情请参见 DataHub 官方文档。选择需要同步的 Topic 类型后，请进行以下操作：在选择区域左侧选中需要同步的对象。单击>。根据业务需求，选择...
时空引擎版本发布记录
修复由于栅格数据带有 NAN 和 INF 等数据，在导入和统计值会出错的问题。4.3 新特性 ST_PixelAsPolygon：将栅格像素转换为Polygon对象。ST_PixelAsPolygons：将栅格像素转换为Polygon对象集合。ST_PixelAsPoint：将栅格像素转换为基于点...
离线同步数据质量排查
说明 读端脏数据一般比较少见，主要出现在半结构化类型的数据源中，比如OSS、FTP、HDFS等。环境信息排查 问题 解决方案 查询了错误或不完整的数据源、表、或者分区等。DataWorks标准项目分为开发数据源、生产数据源，在开发环境运行任务...
Tablestore数据源
表格存储Tablestore是构建在阿里云飞天分布式系统之上的NoSQL数据存储服务，Tablestore数据源为您提供读取和写入Tablestore双向通道的功能，本文为您介绍DataWorks的Tablestore数据同步的能力支持情况。使用限制 Tablestore Reader和Writer...
快照概述
克隆快照 计费 数据库文件系统快照功能不另外单独收取费用，仅收取云盘快照费用，详见 云盘快照计费。使用限制 关于快照的使用限制及配额，请参见 快照使用限制。应用场景 推荐您在以下场景中使用快照。环境复制：创建数据库文件系统快照，...
时空数据库版本发布记录
新增 ST_HasBinData 函数是否具有用户定义二进制数据获取。新增 ST_ClearBinData 函数支持二进制数据的清除。ST_Affine 函数使用根节点变换矩阵方式替代实际坐标值变换。SFMesh对象中Node节点允许使用NULL对象作为空节点，支持占位操作。ST...
时空数据库版本发布记录
新增 ST_HasBinData 函数是否具有用户定义二进制数据获取。新增 ST_ClearBinData 函数支持二进制数据的清除。ST_Affine 函数使用根节点变换矩阵方式替代实际坐标值变换。SFMesh对象中Node节点允许使用NULL对象作为空节点，支持占位操作。ST...
计费方式
数据传输服务DTS（Data Transmission Service）不同实例支持的计费方式不同，本文详细介绍了DTS产品的计费方式。说明 DTS产品的计费项，请参见 计费项。计费方式 支持的实例 说明 包年包月 数据订阅实例 数据同步实例 也称为预付费，即在...
EMR+DLF数据湖解决方案
步骤三：初始化数据 初始化数据一般常见的几种情况如下：已有大数据集群，需要进行数据迁移，此时可以考虑通过 Jindo DistCp 工具将老集群的数据迁移到OSS中。从RDS/MySQL/Kafka 等业务系统接入数据，此时可以考虑通过实时计算Flink实现...
查询账单
对于使用DAS企业版 V3的数据库实例：在 计费项 为 下载数据量 的消费明细中，查看数据导出的费用。在 计费项 为 洞察分析 的消费明细中，查看洞察分析的费用。在 计费项 为 实时搜索分析 的消费明细中，查看实时搜索分析的费用。在 计费项 ...
计费项
本文介绍云数据库RDS的计费项及各计费项的价格。实例规格 定义：RDS主实例和备实例规格的费用。各引擎的规格清单，请参见 主实例规格列表。计费方式：包年包月或按量付费。关于计费方式的说明，请参见 计费方式。价格：购买实例的价格与所...
购买数据同步项目
本文为您介绍如何购买云数据库 OceanBase 数据传输服务提供的数据同步项目。背景信息 目前数据同步项目仅支持预付费模式，即包年包月计费模式。您可以根据本文操作购买相应类型的数据同步项目后，再对项目进行具体配置和管理。数据同步项目...
产品定价
数据投 递（Connector）、写流量暂时不收取费用 价格和免费额度 资源计费项及其单价见下表。资源计费项 价格 免费额度 读流量 0.15 元/GB 1GB/月 存储空间 0.012 元/GB*天 1GB/月 其他计费项 活跃Shard租用 0.04 元/个*天 31 个*天/月（即...
功能特性
Datahub数据总线 功能集 功能 功能描述 参考文档 数据接入 API接入 使用REST API方式，将数据写入Datahub API参考 SDK接入 使用SDK将数据传入Datahub Java SDK C++ SDK Go SDK Python SDK 插件接入 使用插件将数据传入Datahub LogStash插件...
首页
DataWorks智能数据建模首页，为您展示了当前租户内创建的模型及派生指标数量，以及近三十天内当前工作空间成功发布至生产环境的模型列表，帮助您了解模型动态概况。本文为您介绍DataWorks智能数据建模首页信息概览。进入首页 进入数据开发...
按量付费标准版
通常，压缩后的数据量与上传数据之前您自己统计的数据量不同，会被压缩至原数据量的五分之一。详细计费规则请参见 存储费用。上传数据资源 数据上传至MaxCompute不产生费用。下载数据资源 仅对通过公网下载的数据按量收费，详细计费规则请...
计费项与计费方式概述
数据传输费用（按时计费）MaxCompute按时计费规格以使用的数据传输并发数（Slots）和使用时长作为计量指标，并在并发数缩容后收取费用，从而满足业务高峰期资源供给。计费组成 MaxCompute的计费项组成如下图所示。计费方式选择 MaxCompute...
计费概述
按量付费价格（含Serverless）：DTS按量付费价格 包年包月价格：DTS包年包月价格 计费项 DTS实例的计费项有链路配置费用、公网流量费用、数据流量费，不同实例的计费项不同。计费项详情请参见 计费项。计费方式 DTS服务的计费方式有包年...
产品计费
V3计费方式简介 公共云 计费项 计费方式 中国内地、马来西亚（吉隆坡）和印度尼西亚（雅加达）定价 中国香港和新加坡定价 说明 数据引入 按量计费 0.24元/GB 0.36元/GB 数据引入到存储（包含采集、传输和写入整个过程）时收取该费用。...
二进制函数
本文介绍二进制函数的基本语法及示例。日志服务支持如下二进制函数。重要 在日志服务分析语句中，表示字符串的字符必须使用单引号（''）包裹，无符号包裹或被双引号（""）包裹的字符表示字段名或列名。例如：'status' 表示字符串status，...
- 产品推荐
- 这些文档可能帮助您