ARRAY_REMOVE
在ARRAY数组 a 中删除与 element 相等的元素。命令格式 array<T>array_remove(array<T><a>,T)参数说明 a：必填。ARRAY数组。array中的 T 指代ARRAY数组元素的数据类型。支持的数据类型如下：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE ...
ARRAY_UNION
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。a 和 b 中元素的数据类型必须一致。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、...
添加个体到个体组
返回数据中的 data 字段表示与业务相关的数据，一般是一个JSON结构体或数组。说明 响应出错的情况下，data 字段可能为空。该接口返回的 data 字段包含以下参数。名称 类型 示例值 描述 code Integer 200 错误码，和HTTP状态码一致。更多...
提交物模型消息解析脚本
本文以解析上、下行属性消息数据的脚本为例，介绍在数据格式为透传或自定义的产品下，如何编写并提交物模型消息解析脚本。前提条件 创建产品时已定义数据格式为 透传/自定义。具体操作，请参见 创建产品。背景信息 数据格式为 ICA标准数据...
配置数据源
使用数据服务创建API前，需先将您的数据库或数据仓库添加为DataWorks数据源，以此作为数据服务API的数据来源。开发数据服务API时，数据服务将访问该数据源获取数据表的Schema信息，帮助您进一步设置请求和返回参数。本文为您介绍如何配置...
通过Logtail采集Zabbix数据
其中 日志路径 需设置为您在 步骤一：配置数据存储路径 中设置的数据存储路径，其他参数详情请参见 使用JSON模式采集日志。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，...
脚本语法
重要 待处理的数据源必须转换为JSON格式数据，即数组或者嵌套的JSON数据。定义字段，然后筛选设备上报的字段数据，并赋值给定义的字段。定义字段标识符和数据类型的规则，请参见本文下方的“标识符”和“数据类型”。脚本文件中支持使用...
编写自定义脚本
数据解析任务中源节点的Topic数据格式为原始数据时，可以使用自定义脚本进行解析。物联网平台支持配置JavaScript（ECMAScript 5）、Python 2.7和PHP 7.2语言的脚本。本文介绍自定义Topic数据解析脚本模板和示例。JavaScript脚本示例 脚本...
背景信息以及准备工作
您还可以在DLA中创建 云数据库 Redis 版（简称Redis）的数据库连接（映射数据库），然后通过MySQL客户端或者MySQL命令行工具连接DLA，使用标准SQL语句操作Redis数据库数据。本文档将以DLA读取Redis中CSV和JSON两中类型的数据为例，介绍如何...
PostgreSQL数据源
是 无 column 所配置的表中需要同步的列名集合，使用JSON的数组描述字段信息。默认使用所有列配置，例如[*]。支持列裁剪，即列可以挑选部分列进行导出。支持列换序，即列可以不按照表schema信息顺序进行导出。支持常量配置，您需要按照...
ARRAY_INTERSECT
MaxCompute ARRAY_INTERSECT函数用于计算两个ARRAY数组之间的交集，并返回一个包含两个数组中都存在的相同值的新数组。本文为您介绍ARRAY_INTERSECT函数的命令格式、参数说明以及使用示例。命令格式 array<T>array_intersect(array<T><a>,...
配置组件数据
在 设置数据源 面板中，选中 静态数据 数据源，并在下方的数据配置区域内，按照您团队所需的奖品内容，自定义修改模板中已有的数据，或直接粘贴准备好的JSON格式的数据。注意 当前抽奖模板不需要使用奖品图片的 imgSrc 字段数据。如果您...
配置组件数据
在 设置数据源 面板中，选中 静态数据 数据源，并在下方的数据配置区域内，按照您团队所需的奖品内容，自定义修改模板中已有的数据，或直接粘贴准备好的JSON格式的数据。注意 当前抽奖模板不需要使用奖品图片的 imgSrc 字段数据。如果您...
JSON_VALUE
使用JSON_VALUE函数，从JSON字符串中提取指定路径的表达式。使用限制 仅实时计算引擎VVR 3.0.0及以上版本支持JSON_VALUE函数。语法 VARCHAR JSON_VALUE(VARCHAR content,VARCHAR path)入参 参数 数据类型 说明 content VARCHAR 需要解析的...
MAP_FROM_ARRAYS
array中的 K 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。b：必填。ARRAY数组。对应生成MAP的Value值。array中的 V 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回MAP类型。返回规则如下：如果...
JSON_TUPLE
id|item0|item1|+-+-+-+|1|[1,2]|[1,2,[3,2,6]]|+-+-+-+示例5：支持解析包含多重嵌套数组的JSON数据。命令示例如下。select sc.Id,q.item0,q.item1 from school sc lateral view json_tuple(sc.json,"Class1.Student[0].scoreRankIn3Year[2...
22.8版本新特性概览
而新版本中由于有了动态子列，开发者完全不需要关心JSON的嵌套层次和内部数据类型，只需要在目标表中创建JSON数据类型字段，直接将半结构化的数据批量导入到ClickHouse目标表中即可。同时在业务变更JSON对象属性增加的情况下，也不需要修改...
JSON函数和操作符
数组和组合递归地转换为数组和对象（多维数组在JSON中变成数组的数组）。否则，如果存在从SQL数据类型到json的类型转换，则造型函数将用于执行转换;[a]否则，将生成一个标量json值。对于除数字、布尔值或空值之外的任何标量，将使用文本...
注意事项
DataV组件要求的数据格式是个数组，数据服务生成的API返回结果是个带有错误码的完整JSON，因此要使用过滤器对API结果进行处理。您可以在DataV中添加过滤器，也可以直接在数据服务配置API时添加过滤器。一般来说，对于未分页查询的API，直接...
创建Redis表并读取数据
例如，本示例中CSV数据被解析之后形成一个string数组，对应的COLUMN_MAPPING映射到底层这个数组的 index(下标)上：id映射到下标0，name映射到下标1，age映射到下标2。TABLE_MAPPING：值为world_，结合在创建Redis Schema时指定的前缀hello_...
访问增强版HBase数据
云原生多模数据库 Lindorm 支持通过Lindorm计算引擎访问云数据库HBase增强版集群中的数据。前提条件 已开通Lindorm计算引擎。如何开通，请参见 开通与变配。已阅读并了解通过Lindorm计算引擎访问数据时的使用须知。详细内容，请参见 使用...
JSON索引（2.0版）
JSON格式要求 在写入数据时，分析型数据库MySQL版对JSON类型数据中的属性键 key 和属性值 value 有以下要求。属性键 key：必须使用双引号（""）将 key 引起来。key 中不能包含点号（.），例如 {"a.b":"value"} 是不合法的JSON格式。属性值 ...
ARRAY_NORMALIZE
返回根据指定p范数（p Norm）对数组元素规范化后的数组。命令格式 array_normalize(array,p)此函数等价于 TRANSFORM(array,v->v/REDUCE(array,0,(a,v)->a+POW(ABS(v),p),a->POW(a,1/p))，但是 REDUCE 部分只执行一次。参数说明 array：输入...
POSEXPLODE
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。返回值说明 返回表。POSEXPLODE select posexplode(array('a','c','f','b'));返回结果如下。pos|val|+-+-+|0|a|1|c|2|f|3|b|+-+-+相关函数 POSEXPLODE函数属于复杂...
SHUFFLE
返回指定数组的元素随机排列数组。命令格式 shuffle(array)参数说明 array：输入数组。返回值说明 返回指定数组的元素随机排列数组。如果输入值为null，则返回NULL。该函数的返回结果是不确定的。示例 SELECT shuffle(array(1,20,3,5));...
SQL表达式
数组使用说明 数组表达式需要使用双引号，用$.表示取jsonObject，$.可以省略，.表示取jsonArray。例如设备消息为：{"a":[{"v":0},{"v":1},{"v":2}]}，不同表达式结果如下："a[0]"结果为 {"v":0}"$.a[0]"结果为 {"v":0}".a[0]"结果为[{"v":0...
数据结构设计
数据库中的每条记录都是一个JSON格式的对象，一个数据库可以包含多个集合（相当于关系型数据库中的表），每个集合可看做一个JSON数组。EMAS Serverless MongoDB数据库和关系型数据库MySQL的对比，如下表所示。分布式文件存储数据库(MongoDB...
ARRAYS_ZIP
array及 array中的 T 和 U 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。数组中的元素可以为如下类型：TINYINT、SMALLINT、INT、BIGINT FLOAT、DOUBLE BOOLEAN DECIMAL、DECIMALVAL DATE、DATETIME、TIMESTAMP、...
独享数据集成资源组
使用独享数据集成资源组 了解上述独享数据集成资源的规格计费详情后，您可以选择购买合适的独享数据集成资源组并在数据集成任务中使用。从购买至使用，您需进行的主要操作流程如下：购买独享资源组。绑定归属工作空间。为独享资源组绑定...
复杂JSON数据加工
多层数组对象嵌套的复杂JSON数据加工 以一个复杂的保护多层数组嵌套的对象为示例，将 users 下的每个对象中的 login_histories 的每个登录信息都拆成一个登录事件。原始日志_source_:192.0.2.1_topic_:content:{"users":[{"name":"user1",...
JSON函数
您可以通过如下方式构造JSON数据：直接使用JSON数据。例如 json '{"a":1,"b":{"c":30}}'。通过CAST函数将字符串进行显式转换为JSON数据。例如 CAST('{"a":1,"b":{"c":30}}' AS json)。返回值类型：JSON ARRAY。示例：返回$.b 路径下的所有...
安全隧道通信协议
Session使用过程中，Tunnel Header中JSON数据和Tunnel Payload的配置，请参见下表。字段 创建Session 响应数据 Session内的数据传输 关闭Session frame_type 取值2。取值1。取值4。取值3。session_id 无需传入。创建Session成功时，由物...
JSON和JSONB类型
本文将为您介绍Hologres中JSON和JSONB数据类型的语法和使用方法。JSON和JSONB介绍 近年来随着移动端应用的普及，应用埋点、用户标签计算等场景开始诞生，为了更好的支撑这类场景，越来越多的大数据系统开始使用半结构化格式来存储此类数据...
日志服务数据同步至Hologres
Hologres致力于高性能、高可靠、低成本、可扩展的实时计算引擎研发，为用户提供海量数据的实时数据仓库解决方案和亚秒级交互式查询服务，广泛应用在实时数据中台建设、精细化分析、自助式分析、营销画像、人群圈选、实时风控等场景。...
区域下钻热力层（v2.x版本）
区域下钻热力层是基础平面地图的子组件，可直接作为省或直辖市级、地市级区域热力层使用。支持独立的样式、数据和交互配置，包括下钻区域的标注、边线、鼠标交互事件以及位置信息等。本文介绍区域下钻热力层各配置项的含义。注意 当前为v2....
SLICE
array中的 T 指代ARRAY数组元素的数据类型，数组中的元素可以为任意类型。start：必填。切片起点，从1开始，表示从数组的首个元素开始向右切片。start 可以为负数，表示从数组的末尾元素开始向右切片。length：必填。切片长度，必须大于或...
MULTIMAP_FROM_ENTRIES
返回由结构体数组中的Key和包含所有Value的数组所组成的Map。命令格式 multimap_from_entries(array,V>>)参数说明 array,V>>：为Key/Value组成的结构体数组。返回值说明 返回由结构体数组中的Key和包含所有Value的数组所组成的Map，Map格式...
新建个体
返回数据中的 data 字段表示与业务相关的数据，一般是一个JSON结构体或数组。说明 响应出错的情况下，data 字段可能为空。该接口返回的 data 字段包含以下参数。名称 类型 示例值 描述 code Integer 200 错误码，和HTTP状态码一致。更多...
JSON_EXTRACT
解析JSON表达式中对应json_path的数据，注意json_path非法时会报错。命令格式 json json_extract(<json>,<json_path>)参数说明 json：必填，待处理的JSON。json_path：必填，需要返回的值的JSON路径。返回值说明 返回JSON类型。使用示例 ...
ConfigLayer4RulePolicy-配置4层规则策略
该参数使用 JSON 数组转换的字符串表示。JSON 数组的每个元素表示一个已创建的端口转发规则。一次最多可以设置 1 个端口转发规则。说明 您可以调用 DescribeNetworkRules 查询所有已创建的端口转发规则。每个端口转发规则包含以下字段：...
- 产品推荐
- 这些文档可能帮助您