JSON函数
返回结果如下：+-+|json_extract('[10,20,[30,40]]','$.1')|+-+|20|+-+JSON_SIZE json_size(json,json_path)命令说明：从JSON中返回 json_path 指定JSON对象或JSON数组的大小。说明 若 json_path 指向的不是JSON对象或者JSON数组时，返回0...
数据归档至专属存储
本文为您介绍如何将数据归档至专属存储中（存储在 DMS）、将专属存储的数据转存至OSS，以及删除归档至专属存储的数据等操作。前提条件 源数据库类型为：MySQL：RDS MySQL、PolarDB MySQL版、AnalyticDB MySQL 3.0。说明 MySQL数据库账号...
自定义函数（邀测中）
数据发送和返回的数据格式 数据发送的格式 {"rowCount":3,"compressed":true,"data":[[1,"a","2023-08-22 11:30:00"],[2,"b","2023-08-22 12:30:00"],[3,"c",null]]} JSON数据结构说明：rowCount：数据的行数。compressed：传输的数据是否...
Flag参数列表
MaxCompute 2.0扩展函数 SQL Session/Project odps.sql.type.json.enable JSON数据类型使用开关。关于JSON数据类型的更多信息，请参见 MaxCompute JSON类型使用指南。True：打开。False：关闭。MaxCompute JSON数据类型 SQL Session/...
私有部署使用说明
例如，您企业内网中有一个数据库，只能在企业内网中访问，公网是无法访问的，那么线上的页面就无法连接到您的数据库，这种情况下私有部署就能很好地解决您的问题。私有部署对服务器的配置要求 系统和硬件要求如下：CentOS 7.0 64位Linux...
CAST
注意其与json_parse和json_format的区别，json_parse只支持合法的JSON STRING转成JSON，而且可以转成JSON OBJECT，而cast(string as json)可以将任意STRING转成JSON STRING，JSON类型是STRING。cast(null as json)：将NULL值转换为JSON类型...
管理问题数据
数据质量支持您保留数据质量监控过程中从数据表中发现的非预期数据，帮助您快速排查、定位问题，提升数据质量。本文为您介绍如何管理数据质量...重复值个数，固定值。总行数减去重后的个数，即字段重复值的个数。重复值个数与固定值进行比较。
JMES语法
JMES是一个增强型的JSON查询计算语言，不仅可以对JSON数据进行提取，还可以做计算与转换。关于JMES语法的详细介绍请参见 JMES Tutorial。数据加工中的 json_select、e_json、e_split 函数支持通过JMES提取字段或JSON表达式的值，或者通过...
SET
关于JSON数据类型的更多信息，请参见 MaxCompute JSON类型使用指南。True：打开。False：关闭。odps.ext.oss.orc.native 读表时是否使用Native ORC Reader。True：使用。False：不使用。odps.sql.job.max.time.hours 单作业最大执行时间。...
复杂JSON数据加工
本文档主要为您介绍如何使用日志服务数据加工功能对复杂的JSON数据进行加工。多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入，通常包含一个基础信息以及多个子键为数组的数据形式。例如一个服务器每隔1分钟...
缓存数据持久化
当您使用云数据库RDS MySQL并需要提升数据处理速率和降低访问延迟时，阿里云为您提供了缓存数据持久化的高效方案，该解决方案通过整合云数据库Redis与RDS、云数据库Memcache与RDS协同工作，确保数据的高速访问和持久化存储，具备高吞吐、低...
透传/编辑脚本
如果设备无法直接和云端传输JSON格式的数据，则需要设备通过二进制格式将数据透传到云端，由云端运行解析脚本将透传的数据转换成标准ICA格式的JSON数据。前提条件 已创建产品，且产品的 数据格式 设置为 透传/自定义。否则在 产品-设备调试...
数字人卡片使用指南
下图展示的为定义好的模板的数据协议实例：数据协议详解 数据协议是一串JSON来表示传给卡片js的数据结构,主要分成了三部分：字段名，字段类型，描述。字段名和描述是允许用户自行定义的，并可以选择对应的字段类型。JSON协议 const ...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过MaxCompute构建离线数仓、通过Flink和Hologres构建实时数仓，然后通过Hologres和MaxCompute分别进行实时与离线数据分析，从而实现实时离线一体化解决方案。背景信息 随着社会数字化发展，企业对...
服务编排功能介绍
数据服务的服务编排为您提供拖拽式、可视化的工作流编排能力。您可以按照业务逻辑，以串行、并行和分支等结构编排多个API及函数服务为工作流。前提条件 您需要购买DataWorks企业版及以上版本，才可以使用服务编排功能。详情请参见 ...
Routine Load
strip_outer_array-H"strip_outer_array:true"当导入数据格式为 JSON 时，strip_outer_array 为 true 表示JSON数据以数组的形式展现，数据中的每一个元素将被视为一行数据。默认为 false。json_root-H"json_root:$.RECORDS"当导入数据格式...
查询文件
1+_2>100 对于JSON文件，如果在SQL中未指定cast函数，则其类型根据JSON数据的实际类型而定，标准JSON内建的数据类型包括null、bool、int64、double、string等类型。常见的SQL用例 常见的SQL用例包括CSV及JSON两种。CSV 应用场景 SQL语句 ...
基于GitHub公开事件数据集的离线实时一体化实践
本文为您介绍如何基于GitHub实时事件数据通过MaxCompute构建离线数仓、通过Flink和Hologres构建实时数仓，然后通过Hologres和MaxCompute分别进行实时与离线数据分析，从而实现实时离线一体化解决方案。背景信息 随着社会数字化发展，企业对...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
质量规则参数配置
数据表参数配置 数据表规则配置 模板类型 描述 完整性/唯一性 完整性-字段空值校验/字段空字符串校验 唯一性-字段唯一性校验/字段分组个数校验/字段重复值个数校验：校验字段：选择物理表中的需要校验的字段。校验表数据过滤：默认关闭，...
如何对JSON类型进行高效分析
传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到表的JSON类型列中，查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...
通过开源Kafka客户端写入Lindorm流引擎数据
Lindorm流引擎完全兼容开源Kafka API，您可以通过Kafka API编写程序写入Lindorm流引擎数据，也可以通过开源的三方工具采集并写入Lindorm流引擎数据，例如FluentD、Debezium等。本文介绍通过开源Kafka客户端连接Lindorm流引擎并写入Lindorm...
通过开源Kafka客户端写入Lindorm消息引擎数据
Lindorm消息引擎完全兼容开源Kafka API，您可以通过Kafka API编写程序向Lindorm消息引擎写入数据，也可以通过开源的三方工具采集并写入Lindorm消息引擎数据，例如FluentD、Debezium等。本文介绍通过开源Kafka客户端连接Lindorm消息引擎并...
Fn:Select
函数声明 获取列表（数组）中的数据 根据索引获取单个数据 JSON {"Fn:Select":["index",["value1","value2",.],"default_value"]} YAML 完整函数名的语法。Fn:Select:index-value1-value2-.-default_value 缩写形式语法。Select[index,...
Routine Load
例行导入（Routine Load）功能，支持用户提交一个常驻的导入任务，通过不断的从指定的数据源读取数据，将数据导入到Doris中。本文主要介绍Routine Load功能的实现原理、使用方式以及最佳实践。使用限制 当前仅支持从Kafka进行例行导入。...
内建函数概述
复杂类型函数 支持处理MAP、ARRAY、STRUCT及JSON类型数据，实现去重元素、聚合元素、元素排序、合并元素等业务处理能力。加密函数 支持处理STRING、BINARY类型的表数据，实现加密、解密等业务处理能力。其他函数 除上述函数之外，提供支持...
按钮
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
进度环图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
单张图片
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
通过DataX导入数据
本文介绍使用DataX Doris Writer同步数据至 云数据库 SelectDB 版。概述 DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库（MySQL、Oracle等）、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的...
字符串函数
当您需要对存储在表中的字符串数据进行截取、拼接、转化、比较、搜索等操作，您可以使用MaxCompute支持的字符串函数对指定字符串进行灵活处理。本文为您介绍MaxCompute支持的字符串函数的命令格式、参数说明及示例。MaxCompute SQL支持的...
按钮
事件 参数 说明 当数据接口请求完成时 数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据源 页签的 数据响应结果 区域。点击按钮时 当单击按钮时抛出...
单张图片
图片重复：背景图的重复方式，可选 不重复，拉伸满、水平和垂直重复、水平重复 和 垂直重复。圆角：图片的圆角大小，取值范围为0~360。数值为0的时候图片为方形，数值为360时图片为圆形。超链接配置：配置后，在预览或发布页面，单击图片...
RestAPI Reader最佳实践
数据集成RestAPI Reader插件提供了读取RESTful接口数据的能力，通过配置HTTP请求地址，可获取RestAPI类型的数据源数据（例如获取时间范围内的数据、获取分页数据、循环请求参数获取数据等），并转换为数据集成支持的数据类型，传递给下游...
CoAP连接通信
上报数据请求：POST/topic/${topic} Host:${YourEndpoint} Port:5682 Accept:application/json or application/cbor Content-Format:application/json or application/cbor payload:${your_data} CustomOptions:number:2088,2089 表 5....
模型加载器
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果。数据结果 展示数据请求的响应结果。当数据源发生改变时，可单击右侧的 图标，实时查看数据响应结果。说明 还可将...
设备管理
数据类型 是否必须 入参描述 iotId 字符串 是 设备ID fileName 字符串 是 文件名，录像查询接口返回 返回结果 参数名称 数据类型 参数描述 data JSON 响应结果，结果请查看下一列 vodUrl 字符串 点播地址，带鉴权信息，无法重复点播使用 ...
公众号管理
SerializerFeature.MapSortField)，获取 serviceSecret sign=MD5(排序完生成的JSON字符+serviceSecret)将计算得到的sign放到原始的map对象中，再序列化成JSON字符即为最终完整的JSON请求报文 3.4 响应说明 响应数据content-type：...
WAL日志管理
使用Replication Slot可以避免在流复制中出现数据丢失或重复复制的问题，提高数据复制的效率和可靠性。当非活跃的Replication Slot较多而未及时清理时，会导致WAL日志不断堆积，占用大量存储空间，甚至可能写满磁盘导致实例锁定，实例锁定...
API说明
连麦观众信息 push_url_info JSON 推流地址集合 push_url_info.rtmp_url String rtmp:/pushxxxx rtmp推流 push_url_info.rts_url String artc:/pushxxxx rts推流 push_url_info.srt_url String srt:/pushxxxx srt推流 pull_url_info JSON ...
- 产品推荐
- 这些文档可能帮助您