添加数据映射
数据解析的 目标节点 为当前IoT孪生空间时，才可将数据解析的输出数据设置为数据源。具体内容，请参见 配置目标节点。API：选择API数据源的产品和设备，通过调用 ImportDTData 接口触发数据映射的脚本和输出文件执行。数据表：选择当前实例...
AdvanceGenerateDataKey
Aad binary 否 二进制数据 对数据密钥加密时使用的GCM加密模式认证数据。重要 如果指定了该参数，调用 AdvanceDecrypt 解密时需要指定相同的参数。响应数据 名称 类型 示例值 描述 CiphertextBlob bytes 二进制密文 数据密钥密文。说明 ...
Entity
简介 用于承载数据的实体，是对二进制数据的封装。坐标：com.alibaba.bwif.script.core.Entity。结构说明 属性 类型 说明 blob byte[]原始的二进制数据。mimeType String 使用MIME Type区分不同格式，例如application/json、text/xml等。...
将数据写入OSS
实现示例如下：示例：通过内置文本数据解析器将数据写入OSS-非分区路径 示例：通过内置文本数据解析器将数据写入OSS-分区路径 示例：通过内置文本数据解析器将数据以压缩方式写入OSS 示例：通过内置开源数据解析器将数据写入OSS 通过自定义...
二进制类型
hex 格式将二进制数据编码为每字节2位十六进制数字，最重要的四位（半字节）放在开始。整条字符串以 \x 开始（与转义格式相区别）。escape 格式是一种传统的PostgreSQL格式。它采用以ASCII字符序列来表示二进制串的方法，同时将那些无法...
名词解释
Blob模式下支持写入一块二进制数据作为一个Record，数据将会以BASE64编码传输。Shard状态说明 状态 说明 Opening Topic刚创建，所有shard会处于Opening状态直至准备完成。不可读写。Active Shard通道打开后，状态会置为Active，此时表示...
计算引擎版本说明
1.3.0 新特性 新增数据类型转化函数，支持将HBase编码的BINARY类型的数据解析为真实数据类型（例如INT、LONG等）。详细介绍，请参见 访问增强版HBase数据。功能优化 宽表引擎（数据源）支持访问已完成HBase类型映射的表。详细介绍，请参见 ...
EXPORT
如果有二进制数据就必须使用本选项。影响的字段类型包括BINARY、VARBINARY、BLOB。否-no-data 不导出数据。否 table 指定导出某个表。默认导出该数据库所有的表。否 SELECT.INTO OUTFILE 语法 SELECT.INTO OUTFILE 'file_name'[CHARACTER ...
安全算法
编码格式：为了确保密文能够在各种环境中安全地传输、存储和显示，需要将二进制数据转换为文本格式的表示。在进行解密时，需要先将编码后的密文进行解码，恢复为原始的二进制数据再进行解密操作。支持Base64和Hex两种方式输出。点击 箭头，...
安全算法
编码格式：为了确保密文能够在各种环境中安全地传输、存储和显示，需要将二进制数据转换为文本格式的表示。在进行解密时，需要先将编码后的密文进行解码，恢复为原始的二进制数据再进行解密操作。支持Base64和Hex两种方式输出。点击 箭头，...
提交消息解析脚本
本文介绍如何在物联网平台控制台提交消息解析脚本实现自定义格式数据解析。使用与限制 仅通过MQTT协议接入的设备支持自定义Topic消息解析。仅解析设备上报物联网平台云端的消息数据，不解析云端下行数据。解析上报消息的Payload，并返回...
提交物模型消息解析脚本
{"method":"thing.service.property.set","id":"12345","version":"1.0","params":{"prop_float":123.452,"prop_int16":333,"prop_bool":1 } } 数据解析引擎会将JSON格式数据转换为以下数据：0x0100003039014d0142f6e76d 模拟解析设备返回...
二进制串函数和操作符
用于在不同字符集（编码）之间转换字符串的函数，以及用于以文本形式表示任意二进制数据的函数，在 Text/Binary String Conversion Functions 表中显示。对于这些函数，类型为 text 的参数或结果表示为数据库的默认编码，而类型为 bytea 的...
读取OSS数据
recordid|patientid|direction|+-+-+-+|1|51|S|3|48|NE|4|30|W|5|47|S|7|53|N|8|63|SW|10|31|N|+-+-+-+示例：读取OSS数据-分区表（内置文本数据解析器）基于 示例：通过内置文本数据解析器创建OSS外部表-分区表 中创建的OSS外部表mc_oss_...
DECLARE
BINARY 让游标返回二进制数据而不是返回文本格式数据。INSENSITIVE 指示从游标中检索数据的过程不受游标创建之后在其底层表上发生的更新的影响。在PolarDB中，这是默认的行为。因此这个关键词没有实际效果，仅仅被用于兼容 SQL 标准。...
ST_MakeTexture
data 纹理图片的二进制数据流。描述 根据纹理图片二进制的存储形态，可以划分为三种形式，可以按照实际场景需求，灵活制定纹理的存储方案：纹理图片的二进制直接存储在数据库中，优势是不需要进行外部关联，劣势是数据库内数据量会比较大。...
ST_MakeTexture
data 纹理图片的二进制数据流。描述 根据纹理图片二进制的存储形态，可以划分为三种形式，可以按照实际场景需求，灵活制定纹理的存储方案：纹理图片的二进制直接存储在数据库中，优势是不需要进行外部关联，劣势是数据库内数据量会比较大。...
产品功能
数据解析 GDB Automl将导入和上传的数据进行自动解析，您可以自动配置解析数据源和解析器（支持CSV、ARFF、XLS、ORC等多种数据格式的解析），解析后可查看数据的样本量，并查看样本特征摘要，解析特征分布情况。数据切分 支持按照自定义...
查询非结构化数据
说明 您可以根据需要选择Extractor、StorageHandler或Outputer类型：Extractor：自定义输入数据解析器，用来实现自定义处理数据读取的逻辑，即如何读取非结构化数据。StorageHandler：用于指定和配置自定义Extractor和Outputer的实现类。...
JSON_TUPLE
支持包含中文的JSON数据解析。支持多层嵌套的JSON数据解析。支持包含多重嵌套的数组的JSON数据解析。解析行为和设置了 set odps.sql.udf.getjsonobj.new=true;后的GET_JSON_OBJECT的行为保持一致。在需要对同一个JSON字符串多次解析的情况...
创建OSS外部表
CSV 以GZIP方式压缩的CSV TSV 以GZIP方式压缩的TSV 示例：通过内置文本数据解析器创建OSS外部表-非分区表 示例：通过内置文本数据解析器创建OSS外部表-分区表 示例：通过内置文本数据解析器创建OSS外部表-压缩数据 通过内置开源数据解析器...
ST_ImportIFC
支持将IFC文件的二进制数据读取到内存，然后导入数据库。导入限制说明：将忽略IfcOpeningElement类型数据。将忽略最终不挂载到IfcProject节点的孤儿节点。暂时忽略IfcElementType类型的数据。导入成功后，将在数据库中生成三张表：IFC对象...
ST_ImportIFC
支持将IFC文件的二进制数据读取到内存，然后导入数据库。导入限制说明：将忽略IfcOpeningElement类型数据。将忽略最终不挂载到IfcProject节点的孤儿节点。暂时忽略IfcElementType类型的数据。导入成功后，将在数据库中生成三张表：IFC对象...
JSON与XML解析库
请求参数 参数 必选 类型 说明 property_value 是 string JSON 格式数据 property_type 是 int 解析类型，0 表示 JSON，1 表示 XML 返回值 参数 必选 类型 说明 result 是 uint 处理 JSON 数据解析的标识符 property_destroy 删除 JSON 与 ...
2024年
StarRocks Connector 2024-03-22 新增FROM_CHARSET 新说明 MaxCompute FROM_CHARSET支持将指定编码格式的二进制数据转换为UTF-8格式的字符串，以便后续进行计算时使用。FROM_CHARSET 2024-03-21 新增MaxCompute TIMESTAMP_NTZ数据类型介绍 ...
快速入门
分隔符BLOB数据同步时，可以指定16进制分隔符来决定是否对BLOB数据分割后再同步MaxCompute，比如 0A 表示（换行符）Base64编码DataHub BLOB默认存储二进制数据，而MaxCompute对应的同步列为STRING类型，因此管控台创建同步任务时，默认采用...
Kafka实时入湖建仓分析
数据解析配置 的参数说明如下：参数名称 参数说明 消息数据格式 Kafka的Value字段的数据存储格式，固定为JSON。Schema设置模式 默认为 手动设置，会从Kafka的Topic获取一条样例数据进行Schema的推断设置。消息样例数据 通过调整样例数据对...
手工触发同步
概述 手动触发同步：可以实现辅助DNS主动连接主DNS进行解析数据更新。注意：辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。操作步骤 登录 ...
使用OSS Foreign Table导出数据
gzip：读取原始二进制数据并使用GZIP解压缩。说明 仅支持CSV和TEXT格式的文件。fragment_size 数值 否 导出到OSS的文件的大小。单位为MB，默认值为256。当导出到OSS的文件大小超过该值时，系统会切分到新的文件，向新文件中继续写入数据。...
手动触发同步
概述 手动触发同步：可以实现辅助DNS主动连接主DNS进行解析数据更新。注意：辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。操作步骤 登录 ...
SQL表达式
如果payload数据解析过程中出错，会导致规则运行失败。如果要将数据流转到表格存储中，设置转发数据目的地时，需要使用变量格式${表达式} 引用对应的值。如果以上两个示例SQL对应的规则需将数据流转到表格存储的数据表中，主键对应的值可...
使用mysqldump导入导出数据
如果有二进制数据就必须使用本选项。影响的字段类型包括 BINARY、VARBINARY、BLOB。❌-no-data 不导出数据。❌ table 指定导出某个表。默认导出该数据库所有的表。❌ 修改建表语句。从MySQL导出的数据文件包含每个表的建表语句。如果直接在...
解析记录备份
概述 解析记录备份 可帮助用户实现DNS解析记录的定时备份、并支持平滑一键恢复到至指定备份版本，可以有效防止因解析记录丢失而造成的业务影响。产品限制 解析记录备份是云解析DNS付费版功能，版本限制如下 版本 解析记录备份功能 定时备份...
表概述
BINARY 是 无 二进制数据类型。长度限制为8 MB。DATETIME 否 DATETIME '2017-11-11 00:00:00' 日期时间类型，使用东八区时间作为系统标准时间。范围：0000年1月1日~9999年12月31日，精确到毫秒。TIMESTAMP 是 TIMESTAMP '2017-11-11 00:00:...
Delta Lake概述
在使用数据时，通过Spark或Presto对接数据分析引擎并进行数据解析。但该套方案存在如下问题：数据导入可能会失败，失败后清理脏数据和恢复作业困难。方案中没有ETL（Extract Transform Load）过程，缺少必要的数据质量监管。方案中没有事务...
Cassandra数据类型
这个类型在存储媒体或者其他二进制数据类型时很有用，Cassandra并不会检查其中存储的二进制数据是否有效。Cassandra中二进制大对象是以十六进制存储的，如果想将任意的文本数据类型使用blob存储，可以使用textAsBlob()函数实现。inet：这个...
数字型
类型ROWID的列保存固定长度的二进制数据，这些数据描述了一个记录的实际地址。类型ROWID是一个无符号的、4字节的INTEGER，能够存储整个数值（不带有小数部分），数值区间为0 和 4,294,967,295。如果尝试存储超出允许范围的数值，将会产生...
手动触发同步
说明 辅助DNS中的解析记录更新，一般是由主DNS发送NOTIFY来触发解析数据同步，或者是根据主DNS设置的刷新时间来触发解析数据同步（指时间到期则触发）。设置方法 登录 云解析DNS产品控制台。单击左侧导航栏的 辅助DNS 按钮进入辅助DNS页面...
使用mysqldump导入导出数据
如果有二进制数据就必须使用本选项。影响的字段类型包括BINARY、VARBINARY、BLOB。no-data 不导出数据。table 指定导出某个表。默认导出该数据库所有的表。no-create-info 不导出建表信息。net_buffer_length 传输缓冲区大小。影响Insert...
Kafka集群的数据存储格式
您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均 DTS Avro的schema定义。说明 DTS Avro格式中的DDL语句为String类型。Shareplex Json 表 1.参数说明 参数 说明 time 数据库中事务的提交...
- 产品推荐
- 这些文档可能帮助您