配置Kafka输入
{"c":{"c0":[{"AA":"this","BB":"is_data"},{"AA":"that","BB":"is_also_data"}]} } 当数组所在位置路径填写 c.c0，输出字段定义两个字段，一个字段名为 AA，取值方式为 AA，一个字段名为 BB，取值方式为 BB，那么该条Kafka记录将解析得到...
音视频文件离线转写
当需要开启回调功能时，您需要在 控制台 配置好回调类型和地址，并在创建任务时将该参数置为true。转码（Transcoding)Transcoding.TargetAudioFormat string null 当前只支持设置mp3转换。Transcoding.TargetVideoFormat string null 当前...
JSON函数和操作符
连接两个对象将生成一个包含它们键的并集的对象，当存在重复的键时取第二个对象的值。所有其他情况都是通过将非数组输入转换为单个元素数组，然后按照两个数组的方式进行处理。不递归操作：只有顶级数组或对象结构被合并。'["a","b"]':...
JSON类型
有零个或者更多元素的数组（元素不需要为同一类型）SELECT '[1,2,"foo",null]':json;包含键值对的对象-注意对象键必须总是带引号的字符串 SELECT '{"bar":"baz","balance":7.77,"active":false}':json;数组和对象可以被任意嵌套 SELECT '{...
JSON和JSONB类型
JSON和JSONB介绍 近年来随着移动端应用的普及，应用埋点、用户标签计算等场景开始诞生，为了更好的支撑这类场景，越来越多的大数据系统开始使用半结构化格式来存储此类数据，以获得更加灵活的开发和处理。常用的半结构化类型为JSON和JSONB...
语音审核增强版多语言服务
如果内容存在多类风险，能够同时返回多个标签。标签分类包括但不限于如下所示：标签类型 分类 一级标签（labels）violence：暴恐 contraband：违禁品 sexuality：色情 profanity：亵渎辱骂 pullinTraffic：广告引流 regional：地域对立 C_...
基于GitHub公开事件数据集的离线实时一体化实践
提高数据应用价值：更加充分地发挥数据的应用价值，为企业提供更好的决策支持。阿里云在此方向上进行了诸多方案设计，推出了化繁为简的实时离线一体化数仓，通过大数据计算服务MaxCompute和实时数仓Hologres分别对应上述的离线与实时场景，...
基于GitHub公开事件数据集的离线实时一体化实践
提高数据应用价值：更加充分地发挥数据的应用价值，为企业提供更好的决策支持。阿里云在此方向上进行了诸多方案设计，推出了化繁为简的实时离线一体化数仓，通过大数据计算服务MaxCompute和实时数仓Hologres分别对应上述的离线与实时场景，...
复杂类型函数
将一个可能为空的JSON类型对象，转换为包含这些类型的数组。JSON_EXTRACT 解析JSON表达式中对应json_path的数据，注意json_path非法时会报错。JSON_EXISTS 查看json_path对应的JSON值是否存在。JSON_PRETTY 美化JSON，增加换行及空格。JSON...
数据结构
JSON对象 JSON对象是指JSON表达式函数 json_select 或者 json_parse 解析提取后的对象，其由基本数据结构组成。输入字符串转换成对应JSON对象的形式如下表所示：字符串 JSON对象 实际类型 1 1 整数 1.2 1.2 浮点 true True 布尔 false ...
使用Topic通信
如果设备的消息格式不是 Alink JSON，必须使用 消息解析 将设备上报的 自定义格式 数据解析为 Alink JSON 格式，将物联网平台下发的 Alink JSON 格式数据解析为设备 自定义格式 的数据。消息解析的概念和使用步骤，请参见 什么是消息解析。...
字符串函数
KEYVALUE_TUPLE 将字符串拆分为多个Key-Value对，并将Key-Value对分开，返回多个Key对应的Value。LENGTH 计算字符串的长度。LENGTHB 计算字符串以字节为单位的长度。LOCATE 在字符串中查找另一指定字符串的位置。LPAD 将字符串向左补足到...
22.8版本新特性概览
同时引擎针对每个写入的JSON对象值进行动态类型匹配，每个JSON属性按照独立列进行存储。当新写入的JSON对象值和之前的类型不匹配时，引擎会动态修改列类型来兼容所有的数据类型，对于新增JSON属性也会动态增加新的列进行数据的存储。示例...
配置消息通知
content String 字符串格式保存的JSON对象，请自行解析反转成JSON对象。关于 content 解析成JSON后的结构，请参见 content表单字段结构说明。说明 在内容检测API和OSS违规检测中，content 的参数结构不同。设置消息通知 登录 内容安全控制...
JSON函数
概览 PolarDB-X 目前支持mysql 5.7的所有 json函数，可分为以下五大类：类别 函数名 JSON创建 JSON_ARRAY JSON_OBJECT JSON_QUOTE JSON搜索 JSON_CONTAINS JSON_CONTAINS_PATH JSON_EXTRACT->->>JSON_KEYS JSON_SEARCH JSON修改 JSON_...
RestAPI（HTTP形式）数据源
支持的字段类型 类型分类 数据集成column配置类型 整数类 LONG，INT 字符串类 STRING 浮点类 DOUBLE，FLOAT 布尔类 BOOLEAN 日期时间类 DATE 数据同步任务开发 数据同步任务的配置入口和通用配置流程指导可参见下文的配置指导，详细的配置...
Android SDK开发指南
设置指定IPV4类型域名预解析,将预加载域名替换为您希望使用阿里DNS解析的域名 } } 说明 DNSResolver为阿里公共DNS SDK的核心类，其内部封装了阿里公共DNS提供的DoH JSON API，将用户的目标域名解析成为对应的IP。接入阿里公共DNS SDK时建议...
GET_JSON_OBJECT
时，函数返回行为更标准，处理数据更方便，性能更好，推荐您使用此配置，函数返回行为规则如下：返回值仍是一个JSON字符串，可以继续当作JSON来解析，而不再需要额外使用replace或regexp_replace等函数替换反斜线。一个JSON对象中可以出现...
常见问题
本文列举了对象存储OSS的用户经常咨询和关注的一些问题，帮助您快速了解OSS。一般常见问题 什么是阿里云OSS？阿里云对象存储服务OSS（Object Storage Service），是阿里云提供的海量、安全、低成本、高持久性的云存储服务，并可无限扩展。...
请求处理程序（Handler）
函数计算 运行时会将请求参数传递到请求处理程序中，第一个参数是 event 对象，包含请求的有效负载信息，event 对象是Buffer类型，您可以将其转换成所需要的对象类型。第二个参数是 context 对象，提供在调用时的运行上下文信息。更多信息...
访问控制策略工作原理
10.XX.XX.1/32 目的：106.XX.XX.5 协议类型：TCP 端口：0/0 应用：FTP 访问源：10.XX.XX.1/32 目的：106.XX.XX.6 协议类型：TCP 端口：0/0 应用：FTP 策略目的类型为域名地址簿 当策略的 目的类型 配置为 域名地址簿（即目的地址为多个域名...
新功能发布记录
ALTER TABLE 数据类型变更 支持将整型数据类型（TINYINT、SMALLINT、INT、BIGINT、SHORT、LONG）变更为浮点类型（FLOAT、DOUBLE）和DECIMAL类型。ALTER TABLE PARTITION 支持修改分区函数。优化 优化器优化：支持Eager AGG和自动两阶段AGG...
日志采集Agent对比
不支持 支持cpu/内存阈值保护 日志文件采集场景-性能对比 以Nginx的access log为样例，如下一条日志365字节，结构化成14个字段：在下面的测试中，将模拟不同的压力将该日志重复写入文件，每条日志的time字段取当前系统时间，其它13个字段...
MaxCompute JSON类型使用指南
返回结果+-+|_c0|+-+|"MaxCompute"|+-+说明 新的JSON类型采用了更为规范的JSON Path解析，与MaxCompute旧函数get_json_object的JSON Path不同，可能存在兼容性问题，因此新的SQL推荐使用json_extract函数，更多JSON内置函数请参见 复杂类型...
事件请求处理程序（Event Handler）
如果您想在Handler方法中访问 IFcContext 对象，则需要将该方法中的第二个参数指定为 IFcContext 对象。事件函数支持的Handler方法定义如下所示。ReturnType HandlerName(InputType input,IFcContext context);包含IFcContext。ReturnType ...
上传API至API网关
使用Cloud Toolkit可以解析Spring项目，将Controller/RestController中的接口自动解析为API上传至API网关。您无需手动录入API，便可快速完成API网关的接口信息录入。本文介绍如何将API上传至API网关。前提条件 已在IntelliJ IDEA中安装和...
上传API至API网关
使用Cloud Toolkit可以解析Spring项目，将Controller/RestController中的接口自动解析为API上传至API网关。您无需手动录入API，便可快速完成API网关的接口信息录入。本文介绍如何将API上传至API网关。前提条件 已在IntelliJ IDEA中安装和...
数据准备
训练数据需要按照NLP自学习平台定义好的格式进行处理，以JSON为例，您需要将每一条数据处理成如下格式：{"1":{"content":"挺好的 买来太多了。我自己拿刀改了。还是一样好看","records":{"整体":["正"],"外观设计":["正"]} } } 文本的内容...
逻辑解码（wal2json）
PolarDB PostgreSQL版（兼容Oracle）提供wal2json插件，可以将逻辑日志文件输出为JSON格式。背景信息 wal2json是逻辑解码插件，具体功能如下：可以访问由 INSERT 和 UPDATE 生成的元组。根据配置的副本身份，可以访问 UPDATE 和 DELETE 旧...
逻辑解码（wal2json）
PolarDB PostgreSQL版（兼容Oracle）提供wal2json插件，可以将逻辑日志文件输出为JSON格式。背景信息 wal2json是逻辑解码插件，具体功能如下：可以访问由 INSERT 和 UPDATE 生成的元组。根据配置的副本身份，可以访问 UPDATE 和 DELETE 旧...
逻辑解码（wal2json）
PolarDB PostgreSQL版 提供wal2json插件，可以将逻辑日志文件输出为JSON格式。前提条件 支持的 PolarDB PostgreSQL版 的版本如下：PostgreSQL 14（内核小版本14.5.1.0及以上）PostgreSQL 11（内核小版本1.1.29及以上）说明 您可通过如下...
请求处理程序（Handler）
如果您想在Handler方法中访问 IFcContext 对象，则需要将该方法中的第二个参数指定为 IFcContext 对象。事件函数支持的Handler方法定义如下所示。ReturnType HandlerName(InputType input,IFcContext context);包含IFcContext。ReturnType ...
如何对JSON类型进行高效分析
传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到表的JSON类型列中，查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...
函数总览
json_parse 将值解析为JSON对象。xml_to_json 将xml数据转成JSON再做展开操作。IP解析函数 geo_parse 根据IP地址解析出所属国家、省份和市信息。ip_cidrmatch 判断IP地址是否属于CIDR地址块。ip_version 判断IP地址为IPv4还是IPv6。ip_type...
查询文件
LINES表示整个文件由一行行的JSON对象组成，每一行是一个JSON对象（但整个文件本身并不是一个合法的JSON对象），行与行之间以换行分隔符隔开。OSS Select可以支持常见的，\r 等分隔符，且无需用户指定。标准存储类型和低频访问存储类型的...
表达式函数概览
json_parse 将值解析为JSON对象。xml_to_json 将xml数据转成JSON再做展开操作。IP解析函数 geo_parse 根据IP地址解析出所属国家、省份和市信息。ip_cidrmatch 判断IP地址是否属于CIDR地址块。ip_version 判断IP地址为IPv4还是IPv6。ip_type...
Logtail发布历史
修复读取到的数据开头含有非法JSON时，JSON解析异常的问题。1.7.1 新功能 新增采集插件input_command，支持采集命令执行结果。新增处理插件processor_log_to_sls_metric，支持将Log解析为Metric。优化 processor_json插件支持解析JSON ...
SelectObject
其中ErrorCodes包含一个或者多个ErrorCode，多个ErrorCode之间用逗号隔开。ErrorCodes和DetailMessage之间用句号（.）隔开。样例请求 样例请求分为 CSV 和 JSON 两种格式。样例请求（CSV）POST/oss-select/bigcsv_normal.csv?x-oss-process...
JSON_ARRAY
将一个可能为空的JSON类型对象，转换为包含这些类型的数组。命令格式 json json_array()参数说明 element：必填。该参数支持的类型包括STRING、BIGINT、BOOLEAN和JSON。返回值说明 返回JSON类型。使用示例-生成json array select json_...
内建函数概述
当MaxCompute项目打开2.0新数据类型开关时，部分隐式类型转换会被禁用，包括STRING转换为BIGINT、STRING转换为DATETIME、DOUBLE转换为BIGINT、DECIMAL转换为DOUBLE、DECIMAL转换为BIGINT，都有精度损失或报错的风险。此时，您可以通过 CAST...
- 产品推荐
- 这些文档可能帮助您