呼吸气泡层（v2.x版本）
事件 当数据接口请求完成时：数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据请参见上文的 数据示例。动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将...
如何对JSON类型进行高效分析
数据管理（Management）：对数据仓库中的数据进行管理，包括数据备份、数据恢复、数据安全等操作。数据分析（Analysis）：通过数据仓库中的数据进行多维分析，包括查询、报表、数据挖掘等操作。业务系统的生产数据一般会经过中间ETL任务按...
数据格式描述文件
是 parser parser部分决定了您的数据如何被正确地解析，metricsSpec定义了数据如何被聚集计算，granularitySpec定义了数据分片的粒度、查询的粒度。对于parser，type有两个选项：string和hadoopString，后者用于Hadoop索引的 job。...
点热力层（v2.x版本）
数据 可下载上图中的 示例JSON代码。表 1.字段说明 字段 说明 lat 点热力层的纬度。lng 点热力层的经度。value（可选）点热力层的权重值。表 2.配置项说明 配置项 说明 受控模式 打开开关，资产 初始化状态下不请求数据，仅通过回调ID或...
二级索引
desc-o/tmp/describe_table_meta.json 使用二级索引查询数据 读取单行数据 读取表中的数据。您也可以将读取的数据导出到本地JSON格式的文件中。说明 如果读取的数据行不存在，则返回结果为空。命令格式 get-pk '[primaryKeyValue,...
基于GitHub公开事件数据集的离线实时一体化实践
实时链路：通过Flink对日志服务中的数据实时加工并写入Hologres。Flink是强大的流式计算引擎，Hologres支持数据实时写入与更新、写入即可查，二者原生集成，支持高吞吐、低延时、有模型、高质量的实时数仓开发，最终满足业务洞察实时性需求...
2021年
在很多应用场景中需要把HBase增强版或者Lindorm的数据导入到MaxCompute做数据加工、数据分析和联邦查询，同时MaxCompute中的数据也需要写入HBase增强版或者Lindorm中。现在可以在MaxCompute中建立HBase增强版或者Linorm的外表，对HBase增强...
等值面层（v1.x版本）
事件 事件 说明 当地理边界geojson数据接口请求完成时 地理边界geojson数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据请参见上文的 数据示例。当插值点数据接口请求完成时 插值点数据接口请求...
2021年
新说明 FROM_JSON函数可以将JSON转换成MaxCompute的数据类型，或提取JSON中的信息，根据JSON字符串jsonStr和schema信息，返回ARRAY、MAP或STRUCT类型。TO_JSON函数可以将给定的复杂类型ARRAY、MAP或STRUCT，以JSON字符串格式输出。字符串...
JSON函数
返回值类型 BIGINT 示例 select json_array_length('[1,2,3]')+-+|3|JSON_EXTRACT 命令格式 json_extract(json,json_path)命令说明 从 JSON 中返回 json_path 指定的值，json_path 格式为$[n]。如果 n，系统将提示错误。如果 n 为大于0的...
等值面层（v2.x版本）
当裁剪边界数据接口请求失败时 裁剪边界数据接口请求失败时（请求失败的情况可能是：网络问题或接口报错等）返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据示例请参见画布编辑器中组件右侧配置面板 数据 页...
使用Aviator函数作为过滤器的最佳实践
Aviator函数：#首先获取到JSON中的最内层数组rows，接下来对数组进行遍历，当遇到某条记录为"city":"BJ"时,将"tags":""改为"tags":"数据服务"rows=$0.data.rows;for row in rows { if(row.city="BJ"){ row.tags="数据服务;} } return$0;...
删除个体
返回数据中的 data 字段表示与业务相关的数据，一般是一个JSON结构体或数组。说明 响应出错的情况下，data 字段可能为空。该接口返回的 data 字段包含以下参数。名称 类型 示例值 描述 code Integer 200 错误码，和HTTP状态码一致。更多...
概述
脚本文件 使用JavaScript语言编辑脚本，解析处理已配置的数据源中数据，最后输出JSON格式数据。文件大小不超过128 KB。输出文件 使用规定的JSON数据格式，将数据源或通过脚本处理后的数据，映射到指定孪生节点的物模型属性上。文件大小不...
点热力层（v1.x版本）
数据 可下载上图中的 示例JSON代码。表 1.字段说明 字段 说明 lat 点热力层的纬度 lng 点热力层的经度 value（可选）点热力层的权重值。表 2.配置项说明 配置项 说明 受控模式 打开开关，组件初始化状态下不请求数据，仅通过回调ID或蓝图...
数据结构设计
数据库中的每条记录都是一个JSON格式的对象，一个数据库可以包含多个集合（相当于关系型数据库中的表），每个集合可看做一个JSON数组。EMAS Serverless MongoDB数据库和关系型数据库MySQL的对比，如下表所示。分布式文件存储数据库(MongoDB...
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
删除人脸
返回数据中的 data 字段表示与业务相关的数据，一般是一个JSON结构体或数组。说明 响应出错的情况下，data 字段可能为空。该接口返回的 data 字段包含以下参数。名称 类型 示例值 描述 code Integer 200 错误码，和HTTP状态码一致。更多...
JSON相关
示例 var_a=[]var_b=['v1','v2']set(var_a,'k1','v1')set(var_a,'k2',var_b)var_c='{"k1":"v1","k2":["v1","v2"]}' say(concat('json_enc=',json_enc(var_a)))say(concat('json_dec=',get(json_dec(var_c),'k1')))输出：json_enc={"k1":"v1...
JSON相关函数
示例 var_a=[]var_b=['v1','v2']set(var_a,'k1','v1')set(var_a,'k2',var_b)var_c='{"k1":"v1","k2":["v1","v2"]}' say(concat('json_enc=',json_enc(var_a)))say(concat('json_dec=',get(json_dec(var_c),'k1')))输出：json_enc={"k1":"v1...
JSON相关
示例 var_a=[]var_b=['v1','v2']set(var_a,'k1','v1')set(var_a,'k2',var_b)var_c='{"k1":"v1","k2":["v1","v2"]}' say(concat('json_enc=',json_enc(var_a)))say(concat('json_dec=',get(json_dec(var_c),'k1')))输出：json_enc={"k1":"v1...
JSON相关
示例 var_a=[]var_b=['v1','v2']set(var_a,'k1','v1')set(var_a,'k2',var_b)var_c='{"k1":"v1","k2":["v1","v2"]}' say(concat('json_enc=',json_enc(var_a)))say(concat('json_dec=',get(json_dec(var_c),'k1')))输出：json_enc={"k1":"v1...
网格热力图（v1.x版本）
数据 可下载上图中的 示例JSON代码。表 1.字段说明 字段 说明 lng 网格点的经度。lat 网格点的纬度。表 2.配置项说明 配置项 说明 受控模式 打开开关，资产初始化状态下不请求数据，仅通过回调ID或蓝图编辑器配置的方法发起请求数据；关闭...
日志实时入仓快速入门
Flink全托管产品提供丰富强大的日志数据实时入仓能力。本文为您介绍如何在Flink全托管控制台上快速构建一个从Kafka到Hologres的数据同步作业。...说明 虽然插入到Kafka中的数据仅只有一个嵌套列house-points，但是由于在kafka...
区域下钻热力层（v2.x版本）
参数 说明 填充颜色 数据中最大、最小及为空的value值对应区域的颜色。边线样式 区域下钻热力层各区域边线的颜色、粗细和线类型。标注：设置区域下钻热力层的区域的标注显示字段、文本样式参数。单击 标注 左侧的 图标，可控制 标注 的显隐...
Flume插件
产品介绍 Flume-DataHub插件是基于Flume开发的DataHub数据订阅/发布插件，可以将采集到的数据写入DataHub，也可以从DataHub读取数据写入其他系统。该插件遵守Flume插件开发规范，安装方便，可以很方便的向DataHub发布/订阅数据。产品安装 ...
JSON解析
Logtail JSON解析插件支持将Object类型的JSON日志结构化，解析为键值对形式。使用限制 JSON日志构建于两种结构，包括Object类型（键值对的集合）和Array类型（值的有序列表）。Logtail JSON解析插件是原生插件，支持解析Object类型的JSON...
流式气泡层（v1.x版本）
仅当数据中的 info 信息设置为多行时有效。缓存：打开开关，系统会自动缓存您的气泡数据，并且可以自定义缓存条数。当数据发生变化时，系统不会清空您已经缓存的数据。顺序：打开开关，系统按照数据的顺序进行循环冒泡，关闭开关，系统进行...
添加云产品数据源
您可将其他阿里云平台的数据同步至物联网平台的数据服务中，用于数据的加工处理和分析。本文介绍如何添加、删除云产品数据源，及开启数据源同步。前提条件 已购买物联网平台的企业版实例，具体操作，请参见 购买企业版实例。计费说明 从云...
JSON格式
日志服务将日志投递到OSS后，支持存储为不同的文件格式，本文介绍JSON格式。参数配置 在 配置投递规则 时，如果选择 存储格式 为 json，对应的参数配置如下所示。参数 说明 是否投递tag 是否投递日志tag字段，例如_tag_:abc。OSS文件地址 ...
创建Aviator函数
当函数被作为API的前置过滤器时，系统会将API请求参数或上个函数的输出结果，从 key-value map 转换为JSON形式，并使用该JSON对$0 参数进行传参，且JSON中的 value 仅支持字符串类型。当函数被作为API的前置过滤器时，函数的输出结果为 key...
脚本和输出语法
背景信息 孪生体中支持添加数据源类型如下：类型 说明 Topic数据 自定义Topic和物模型属性上报Topic：物联网平台是基于Topic中的数据格式来处理和传递数据的。设备Topic数据格式说明，请参见 数据格式。数据服务中数据解析的数据源：物联网...
数据类型
您在创建索引时，可将字段的数据类型设置为text、long、double或JSON。本文介绍各个数据类型的配置示例及注意事项。text类型 如果您要查询和分析字符串类型的字段，需在配置索引时，将字段的数据类型设置为text，并开启统计功能。说明 开启...
JSON函数
ARRAY_APPEND JSON_ARRAY_INSERT JSON_INSERT JSON_MERGE JSON_MERGE_PATCH JSON_MERGE_PRESERVE JSON_REMOVE JSON_REPLACE JSON_SET JSON_UNQUOTE JSON属性 JSON_DEPTH JSON_LENGTH JSON_TYPE JSON_VALID JSON工具 JSON_PRETTY JSON_...
中国国家边界
如果两者都进行了配置，DataV优先使用数据中的配置。线样式 参数 说明 国界颜色、国界粗细 设置国界线的颜色和线条粗细大小。省界颜色、省界粗细 设置省界线的颜色和线条粗细大小。海岸线颜色、海岸线粗细 设置海岸线的颜色和线条粗细大小...
Dataphin数据集成模块自定义组件中关于自定义数据源...
概述 日常答疑中，经常有用户对于自定义组件中JSON串配置项的意义和用法不是特别清楚，本篇通过具体问题说明自定义组件中JSON串和自定义数据源配置项的对应关系，并提供自定义组件用法的一些注意事项。问题描述 问题1：辛苦问下这两个地址...
呼吸气泡层（v1.x版本）
事件 当数据接口请求完成时：数据接口请求返回并经过过滤器处理后抛出的事件，同时抛出处理后的JSON格式的数据。具体数据请参见上文的 数据示例。动作 动作 说明 请求数据接口 重新请求服务端数据，上游数据处理节点或图层节点抛出的数据将...
外部表常见问题
基于外部表执行SQL作业时，运行慢的常见情况如下：OSS外部表中的GZ压缩文件读取慢 问题现象 用户创建了一个OSS外部表，数据源为OSS中的GZ压缩文件，大小为200 GB。在读取数据过程中执行缓慢。产生原因 由于Map端执行计算的Mapper数量过少，...
配置模板（公有云）
如果导入的监控项在当前环境中已存在，则新导入的监控配置和报警规则将会覆盖原有内容。将 JSON 格式的监控配置信息导入当前环境，监控配置导入成功后即会自动生效。具体操作如下：进入控制台，在左侧导航栏点击 配置管理>配置模板。在 ...
Fn:Select
函数声明 获取列表（数组）中的数据 根据索引获取单个数据 JSON {"Fn:Select":["index",["value1","value2",.],"default_value"]} YAML 完整函数名的语法。Fn:Select:index-value1-value2-.-default_value 缩写形式语法。Select[index,...
- 产品推荐
- 这些文档可能帮助您