管理Kafka JSON Catalog
本文将从以下方面为您介绍如何管理Kafka JSON Catalog：创建Kafka JSON Catalog 查看Kafka JSON Catalog 使用Kafka JSON Catalog 删除Kafka JSON Catalog 使用限制 Kafka JSON Catalog仅支持消息格式为JSON的Topic，暂不支持其他格式。...
内建函数常见问题
问题类别 常见问题 日期函数 MaxCompute是否支持将2010/1/3格式转换为2010-01-03？如何将UNIX时间转为日期值？如何获取系统当前时间？使用YEAR、QUARTER、MONTH和DAY日期函数时，报错cannot be resolved，如何解决？执行TO_DATE函数时，报...
2023年
JSON_VALID JSON_PARSE JSON_FORMAT JSON_TYPE JSON_PRETTY JSON_EXTRACT JSON_ARRAY JSON_OBJECT JSON_EXISTS 2023-06-29 新增MaxCompute JSON类型使用指南（试用Beta版本）新说明 MaxCompute当前支持了JSON数据类型，提高了表中带有JSON...
设备数据
quality 长整型 质量码-bizAttributeDataList JSON 数组 业务属性值-attributeGroupName 字符串 属性组名称-attributeName 字符串 属性名称-value 字符串 属性值-time 长整型 创建时间-indicatorDataList JSON 数组 指标值-indicatorCode ...
资产模型
路径/industry/asset/biz/attributes/query 版本 3.0.2 请求参数 入参名称 数据类型 结构类型 是否必须 入参描述 子级参数类型 assetIdentifierList JSON 数组 否 资产标识数组，查询多个资产的基础数据 字符串 assetCodes JSON 数组 否 ...
Maxwell
primary-key-columns ARRAY<STRING>NULL 主键名称数组。对应于Maxwell记录中的primary_key_columns字段。ingestion-timestamp TIMESTAMP_LTZ(3)NULL 连接器处理事件时的时间戳。对应于Maxwell记录中的ts字段。如何在Kafka中访问Maxwell...
PHP脚本示例
}/*将设备自定义Topic数据转换为JSON格式数据,设备上报数据到物联网平台时调用*入参：$topic 字符串，设备上报消息的Topic*入参：$rawData 普通数组，数组元素为整数*出参：$jsonObj 关联数组，关联数组key取值为英文字符串，不能是字符的...
编写自定义脚本
int16']=bytes_to_int(uint8Array[5:7])jsonMap['prop_bool']=bytes_to_int(uint8Array[7:8])jsonMap['prop_float']=bytes_to_int(uint8Array[8:])return jsonMap#byte数组转换为整型。def bytes_to_int(bytes):data=['%02X'%i for i in ...
SQL表达式
创建数据流转规则时，需编写SQL来解析和处理设备上报的JSON数据。二进制格式的数据不做解析，直接透传。本文主要介绍如何编写数据流转规则的SQL表达式。SQL表达式 重要 若物模型标识符以数字开头，不支持使用SQL表达式访问该物模型，即旧版...
处理数据
.push({ name:mapdata[key].name,value:+data[key],code:mapdata[key].code,city:mapdata[key].city,lng:+mapdata[key].lng,lat:+mapdata[key].lat })} } } }).on("end",function(){ fs.writeFile('./data/'+filename+'.json',JSON....
cjson
args description array 数组类型的JSON结构体 index 数组成员索引 获取JSON对象成员 cJSON*cJSON_GetObjectItemCaseSensitive(const cJSON*const object,const char*const string);args description object 对象类型的JSON结构体 string ...
Canal
canal-json.map-null-key.literal 选填 null String 当canal-json.map-null-key.mode的值是LITERAL时，指定字符串常量替换Map中的空key值。canal-json.encode.decimal-as-plain-number 选填 false Boolean 参数取值如下：true：所有DECIMAL...
PHP脚本示例
出参：$jsonObj，关联数组，数组key取值为英文字符串，不能是字符类型的数字，如"10"，不能为空。function rawDataToProtocol($rawData){$jsonObj=array();return$jsonObj;}/*将设备自定义Topic数据转换为JSON格式数据，设备上报数据到物...
数据操作
attr 是[{"c":"name","v":"redchen"},{"c":"country","v":"china","t":"string","ts":15327798534}]数据表属性列，以JSON格式的数组表示。每个属性列包含如下字段：c（必选）：属性列名称。v（必选）：属性列的值。t（可选）：属性列类型，...
向量生成（rds_embedding）
您需要在数据库中直接将文本转化为向量时，RDS PostgreSQL的rds_embedding插件为您提供了自定义模型配置和模型调用能力，使文本到向量的转换变得简单快捷，从而满足特定的数据处理需求。背景 嵌入（embedding）是指将高维数据映射为低维...
配置Kafka输出
前提条件 配置Kafka输出节点前，您需要先配置好相应的输入或转换数据源，实时同步支持的数据源。背景信息 写入数据不支持去重，即如果任务重置位点或者Failover后再启动，会导致有重复数据写入。操作步骤 登录 DataWorks控制台，单击左侧...
通用参考
例如日志字段中包含一个JSON字符串类型的字段，在使用 parse-json 的过程中，可能将同名字段暴露出来，举例如下：SPL语句*|parse-json content 输入数据 content:'{"Method":"PostLogs","method":"GetLogs","status":"200"}' 输出结果 第一...
查询和分析JSON日志
本文以查询和分析JSON类型的网站日志为例，为您介绍查询和分析JSON日志的步骤，并提供SQL语句示例。前提条件 已采集JSON日志。具体操作，请参见 使用极简模式采集日志。步骤一：创建索引 登录 日志服务控制台。在Project列表区域，单击目标...
管理服务
如果导出多个服务的JSON代码，需要按照[json1,json2,.]格式，其中，json1,json2 为服务导出时的单个服务的完整的JSON串。说明 格式串中最外层使用方括号（[]）形成一个导入的文本。导入服务 在 我的服务 页面单击 导入服务。在 批量导入...
内置模板函数
dictsort(value)将对象中的键值对（Key:Value）按照Key进行排序，返回数组。支持 alert.labels 字段示例 {"host":"host-1","app":"nginx"} 内容模板配置 {%-for key,val in dictsort(alert.labels)%} {{ key }}:{{ val }} {%-endfor%} 结果...
hmac-auth插件
将 stringToSign 使用UTF-8解码后得到Byte数组，然后使用加密算法对Byte数组进行加密，然后使用Base64算法进行编码，形成最终的签名。添加签名流程 客户端需要将以下四个Header放在HTTP请求中传输给API网关，进行签名校验。x-ca-key：取值...
数据结构
JSON对象 JSON对象是指JSON表达式函数 json_select 或者 json_parse 解析提取后的对象，其由基本数据结构组成。输入字符串转换成对应JSON对象的形式如下表所示：字符串 JSON对象 实际类型 1 1 整数 1.2 1.2 浮点 true True 布尔 false ...
参数格式说明
示例：Windows：aliyun ecs DescribeImages-ImageId"m-23e0oxmbv,m-23waejuy9"Linux/macOS：aliyun ecs DescribeImages-ImageId 'm-23e0oxmbv,m-23waejuy9' String类型JSON数组参数值的传入：API文档中标注为String类型的参数，如果要求...
Kafka数据源
数值 json数值类型 字节流 字节流会进行Base64编码后转换成UTF8编码的字符串 text 字符串 UTF8编码字符串 布尔 转换为UTF8编码字符串"true"或者"false"时间/日期 yyyy-MM-dd HH:mm:ss格式UTF8编码字符串 数值 UTF8编码数值字符串 字节流 ...
提取字段
配置示例如下：原始日志"content":"time:2022.09.12 20:55:36\t json:{\"key1\":\"xx\",\"key2\":false,\"key3\":123.456,\"key4\":{ \"inner1\":1,\"inner2\":false}}"Logtail插件处理配置 处理结果"time":"2022.09.12 20:55:36""val_key1...
字段值提取函数
函数格式 e_json(key,expand=None,depth=100,prefix="_",suffix="_",fmt="simple",sep=".",expand_array=True,fmt_array="{parent}_{index}",include_node=r"[\u4e00-\u9fa5\u0800-\u4e00a-zA-Z][\w\-\.]*",exclude_node="",include_path=...
导入场景
JMeter脚本与PTS API压测的字段对应关系如下：JMeter脚本字段 PTS API压测字段 Test Plan（测试计划）压测场景 Thread Group（线程组）串联链路 Sampler（采样器）说明 仅支持HTTP Request。Name 压测API名称 Server Name or IP Path Port ...
新功能发布记录
Interactive型资源组的优先级队列与并发控制 Job型资源组的优先级队列 Job型资源组供了作业优先级队列的能力，您可以设置作业的优先级，使不同作业进入不同的优先级队列（包括LOWEST队列、LOW队列、NORMAL队列和HIGH队列）。优先级高的作业...
通过OpenAPI获取Token
AccessKeyId my_access_key_id AccessKeySecret:my_access_key_secret Timestamp:2019-04-18T08:32:31Z SignatureNonce:b924c8c3-6d03-4c5d-ad36-d984d3116788 请求参数如下：AccessKeyId:my_access_key_id Action:CreateToken Version:...
生成补丁
示例：针对1.0.0版本在后台发布了一个补丁版本号为1的补丁修复了bug1，然后发现此时针对这个版本补丁1修复的不完全，代码还有bug2，在后台重新发布一个补丁版本号为2的补丁，那么此时补丁2就必须同时包含bug1和bug2的修复；如果只包含bug2...
数据表操作
p，-pk 是[{"c":"uid","t":"string"},{"c":"pid","t":"integer"}]数据表主键列，以JSON格式的数组表示。包含如下字段：c（必选）：主键列名称。t（必选）：主键列类型，取值范围为string、integer、binary。opt（可选）：可选配置，取值...
Lindorm（HBase）数据入库与ETL
DLA Ganos Pipeline模型一般表示为一个JSON对象，其主要对象称为pipeline，该对象是要执行的步骤数组（还有一些JSON对象，我们将其称为Stage Objects）。DLA Ganos整个入库操作的Pipeline流程与相关参数全部通过一个JSON对象进行定义，一个...
分布键Distribution Key
如果您的数据表经常需要进行GROUP BY、JOIN操作或为了避免数据倾斜，您可以在建表时设置分布键（Distribution Key），合适的分布键可以帮助数据均匀分布在所有计算节点上，显著提高计算和查询性能。本文为您介绍Hologres中为表设置...
基于向量检索服务与TextEmbedding实现语义搜索
什么是 Embedding 简单来说，Embedding是一个多维向量的表示数组，通常由一系列数字组成。Embedding可以用来表示任何数据，例如文本、音频、图片、视频等等，通过Embedding我们可以编码各种类型的非结构化数据，转化为具有语义信息的多维...
私有部署使用说明
例如，您企业内网中有一个数据库，只能在企业内网中访问，公网是无法访问的，那么线上的页面就无法连接到您的数据库，这种情况下私有部署就能很好地解决您的问题。私有部署对服务器的配置要求 系统和硬件要求如下：CentOS 7.0 64位Linux...
RemoveWatchItems
WatchItemIds String 是["30f6XXXX","7c2eXXXX","b4a1XXXX"]目标ID列表，JSON数组格式，一次支持操作1000个。返回数据 名称 类型 示例值 描述 RequestId String 46329898-489C-4E63-9BA1-C1DA5C5D0986 请求ID。Success Boolean true 是否...
如何对JSON类型进行高效分析
本文介绍了PolarDB IMCI为应对海量结构化与半结构化数据分析场景，通过整合列式JSON、虚拟列、秒级加减列、表列数扩展及列存索引等系列功能而构建出的扩展流计算方案，以及该方案的应用案例。背景 随着应用场景多样化与快速迭代，业务系统...
基于向量检索服务与TextEmbedding实现语义搜索
什么是Embedding 简单来说，Embedding是一个多维向量的表示数组，通常由一系列数字组成。Embedding可以用来表示任何数据，例如文本、音频、图片、视频等等，通过Embedding我们可以编码各种类型的非结构化数据，转化为具有语义信息的多维...
CreateTimingSyntheticTask-创建定时拨测任务
string 否 JSON Map {"key1":"value1","key2":"value2"} DisableCache integer 否 是否禁用缓存。0：不禁用 1（默认）：禁用 1 DisableCompression integer 否 通过 Accept-Encoding 字段判断是否接受压缩文件，0-不禁用，1-禁用，默认为 0...
CreateWebRule-创建一条网站业务转发规则
JSON 数组中的每个元素是一个 JSON 结构体，包含以下字段：ProxyRules：JSONArray 类型|必选|源站服务器信息，包括端口号和服务器地址。数组中每个元素是一个 JSON 结构体，包含以下字段：ProxyPort：Integer 类型|必选|协议对应的端口号。...
- 产品推荐
- 这些文档可能帮助您