Schema探索
示例二：运行不带有ON子句的SHOW RETENTION POLICIES查询 使用 USE<database_name>指定数据库>USE NOAA_water_database Using database NOAA_water_database>SHOW RETENTION POLICIES name duration shardGroupDuration replicaN default-...
JSON函数
您可以通过如下方式构造JSON数据：直接使用JSON数据。例如 json '{"a":1,"b":{"c":30}}'。通过CAST函数将字符串进行显式转换为JSON数据。例如 CAST('{"a":1,"b":{"c":30}}' AS json)。返回值类型：JSON ARRAY。示例：返回$.b 路径下的所有...
数据类型
针对非完全合法的JSON数据，日志服务支持解析合法部分。例如以下为非完整的JSON日志，日志服务可正确解析 content.remote_addr 字段、content.request.request_length 字段和 content.request.request_method 字段。content:{ remote_addr:...
安全隧道通信协议
表 1.Tunnel Header的JSON数据 参数 数据类型 说明 frame_type Integer 隧道帧类型。可取值为：1：common_response，响应数据。2：session_create，创建Session。3：session_release，关闭Session。4：data_transport，创建Session内的数据...
特定格式文本数据加工
首先将dict数据转成JSON数据，再使用 e_json 函数进行展开即可。原始日志 content:{ 'referer':'-','request':'GET/phpMyAdmin','status':404,'data-1':{ 'aaa':'Mozilla','bbb':'asde' },'data-2':{ 'up_adde':'-','up_host':'-' } } LOG ...
提交物模型消息解析脚本
背景信息 数据格式为 ICA标准数据格式，设备按照物联网平台定义的标准数据格式生成消息上报，标准Alink JSON数据格式说明，请参见 设备属性、事件、服务。数据格式为 透传/自定义，设备通信时，需要物联网平台调用您提交的消息解析脚本，将...
SQL表达式
创建数据流转规则时，需编写SQL来解析和处理设备上报的JSON数据。二进制格式的数据不做解析，直接透传。本文主要介绍如何编写数据流转规则的SQL表达式。SQL表达式 重要 若物模型标识符以数字开头，不支持使用SQL表达式访问该物模型，即旧版...
GRANT
GRANT ALL ON DATABASE db1 TO user1;或者 GRANT ALL ON SCHEMA db1 TO user1;授予指定权限 为用户user2授予数据库db2中的表table2的管理员权限。GRANT ADMIN ON TABLE db2.table2 TO user2;为用户user3授予当前数据库中表table3的写权限。...
复杂类型函数
JSON_FORMAT 将JSON数据转换成STRING类型，默认不自动进行美化。JSON_PARSE 将STRING类型转成JSON类型，非JSON格式转换为字符串会报错。JSON_VALID 检查字符串是否为合法的JSON格式。CAST 支持基本类型与JSON类型的转换。说明 以下函数示例...
调试实时任务
说明 Kafka中支持json、csv、canal-json、maxwell-json、debezium-json数据格式的自动抽样。Kafka自动抽样仅支持 无认证 和 用户名+密码认证 方式，不支持SSL。Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有...
跨库查询
当需要查询分散在不同数据库中的数据时，您可以使用 云原生数据仓库 AnalyticDB PostgreSQL 版 的跨库查询功能方便地将数据聚合在一起，进行高效查询，提高数据访问效率。功能介绍 Database是PostgreSQL生态下数据库的最高级别，同一个实例...
LLaMa2 大语言模型
数据准备 对Llama2系列模型进行定制时，所需的训练数据格式为json数据，您可以提供多条json样本在一个jsonl文件中，注意每行仅包含一条json。定制数据格式 在准备sft训练数据阶段的过程中需要构造出对话的结构，需要包含 Human:以及 ...
DBA_DB_LINKS
DBA_DB_LINKS 视图提供数据库中的所有 database link 的相关信息。名称 类型 说明 owner TEXT database link 所有者的用户名。db_link TEXT database link 的名称。type CHARACTER VARYING 远程服务器的类型。username TEXT 登录用户的用户...
百川开源大语言模型
数据准备 对百川系列模型进行定制时，所需的训练数据格式为json数据，您可以提供多条json样本在一个jsonl文件中。注意每行仅包含一条json。定制数据格式 在准备sft训练数据阶段的过程中需要构造出对话的结构，需要包含 Human:以及 ...
LLaMa2 大语言模型
数据准备 对Llama2系列模型进行定制时，所需的训练数据格式为json数据，您可以提供多条json样本在一个jsonl文件中，注意每行仅包含一条json。定制数据格式 在准备sft训练数据阶段的过程中需要构造出对话的结构，需要包含 Human:以及 ...
使用Kafka（离线与实时）
FLATTEN：消息格式为JSON数据类型的字符串，JSON中的Key和Value会被解析，写入到对应的MaxCompute表中，其中JSON数据中的Key和需要与MaxCompute的表列名对应。关于不同格式消息导入的案例，详情请参见 使用示例。mode 否 消息同步到...
数据库管理
本文介绍如何使用Terraform创建和删除RDS PostgreSQL数据库以及修改或添加数据库备注信息。前提条件 已创建RDS PostgreSQL实例，详情请参见 创建RDS PostgreSQL实例。实例状态为运行中，您可以通过如下两种方式查看：参见 查询实例详情 ...
JSON日志
本视频向您展示数据加工结构化数据JSON格式日志的解析。简单JSON解析 复杂JSON解析
JMES语法
JMES是一个增强型的JSON查询计算语言，不仅可以对JSON数据进行提取，还可以做计算与转换。关于JMES语法的详细介绍请参见 JMES Tutorial。数据加工中的 json_select、e_json、e_split 函数支持通过JMES提取字段或JSON表达式的值，或者通过...
Delta Lake 快速入门
此快速入门演示如何生成管道，以便将JSON数据读入Delta表、修改表、读取表、显示表历史记录，以及优化表。有关演示这些功能的Databricks笔记本，请参阅 入门笔记本。创建表 若要创建一个delta表，可以使用现有的Apache Spark SQL代码，也...
结果字段说明
JSON数据格式。project_name 模型训练任务数据源所在的Project。logstore_name 模型训练任务数据源所在的Logstore。result 结果内容。JSON数据格式。event_msg 模型训练任务在该时间点的进度信息。occ_time 模型训练任务进度对应的时间戳。...
调试实时任务
说明 Kafka中支持json、csv、canal-json、maxwell-json、debezium-json数据格式的自动抽样。Kafka自动抽样仅支持 无认证 和 用户名+密码认证 方式，不支持SSL。Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有...
支持的文件格式
JSON EsriJsonSerDe DLA支持Esri ArcGIS的地理JSON数据文件的SerDe处理，关于这种地理JSON数据格式说明，可以参考：https://github.com/Esri/spatial-framework-for-hadoop/wiki/JSON-FormatsCREATE EXTERNAL TABLE IF NOT EXISTS ...
数据共享
返回信息如下时，表示当前使用的数据库为db02：current_database-db02(1 row)订阅Share，并设置Share的本地别名。IMPORT DATASHARE s01 AS s01a FROM DATABASE";为步骤3中查询到的目标库db01的UUID。在目标库db02中查询源库db01共享的数据...
云函数支持固定出网IP
示例 ctx.httpProxyClient.postForm('https://www.example.com/search',{ q:'nodejs',cat:'1001' })POST JSON 数据 用法 ctx.httpProxyClient.postJson(url:String,json:Object?headers:Object?示例 ctx.httpProxyClient.postForm('...
CAST
返回：+-+|_c0|+-+|NULL|+-+相关函数 CAST函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。同时，CAST函数也属于其他函数，更多其他业务场景的函数请参见 其他函数。
管理服务
对于JSON数据会全量覆盖调用方传递过来的数据，默认为 importRequest=exportRequest。在 响应脚本 中，目前仅支持JSON，数据会全量覆盖源服务的响应数据，默认为 exportResponse=importResponse。脚本映射的结果会作为界面映射的输入，建议...
ElasticSearch
spark.conf spark.jars.packages org.elasticsearch:elasticsearch-spark-30_2.12:8.2.0 读取JSON数据，并将数据写入到ElasticSearch。spark/读取oss数据 val path="oss:/your bucket/data/es_case.json"val data=spark.read.option(...
数据结构设计
分布式文件存储数据库(MongoDB)关系型数据库(MySQL)数据库（database）数据库（database）表（collection）表（table）记录（document）行（row）域（field）列（column）索引（index）索引（index）自动将_id 字段作为主键 主键（primary ...
字符串函数
当您需要对存储在表中的字符串数据进行截取、拼接、转化、比较、搜索等操作，您可以使用MaxCompute支持的字符串函数对指定字符串进行灵活处理。本文为您介绍MaxCompute支持的字符串函数的命令格式、参数说明及示例。MaxCompute SQL支持的...
复杂JSON数据加工
本文档主要为您介绍如何使用日志服务数据加工功能对复杂的JSON数据进行加工。多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入，通常包含一个基础信息以及多个子键为数组的数据形式。例如一个服务器每隔1分钟...
设备影子概览
JSON数据格式的详细说明，请参见 设备影子JSON详解。每个设备有且只有一个设备影子，设备可以通过MQTT获取和设置设备影子来同步状态，该同步可以是影子同步给设备，也可以是设备同步给影子。与设置设备期望属性值区别 设备影子与设置设备...
设置 AP 数据
setAPDataStorage 接口用于保存一个字符串到客户端统一存储，字符串...JSON 数据需要先字符串化。Y“”出参 回调函数带入的参数 result:{success}。属性 类型 描述 success bool 是否保存成功。错误码 错误码 描述 11 字符串长度超出限制。
内置函数
通用操作 format length regexMatchString split 数组操作 arrayContains arrayUnique toArray Map操作 mapKeys mapValues mapValuesPartition 数据编码与解码 toBase64 fromBase64 哈希计算与UUID生成 hash uuid JSON数据操作 ...
SelectObject
输出JSON的格式参数（可选）子节点：RecordDelimiter Type 枚举 指定输入JSON的类型：DOCUMENT、LINES OutputRawData bool，默认false 指定输出数据为纯数据（可选）子节点：None 父节点：OutputSerialization 说明 您在请求中指定...
数字人卡片使用指南
从卡片详情生成数据里复制出云小蜜JSON数据，例如：[{"code":"card:1","data":{"recommend":["选择一","选择二","选择三"],"text":"下面有多个选择，请选择"},"endIndex":2,"beginIndex":0 }]将该段Data配置在对话机器人中的回复节点，数字...
服务编排功能介绍
然后，输出 {"user_id":"value"} 形式的JSON数据。单击 PYTHON1 节点后，从 选择函数 列表中选择注册的函数名称。单击 SWITCH1 节点后，在编辑对话框中，单击 设置分支条件。条件表达式考察上一个节点的输出，例如，${节点ID.输出值名}>1 ...
透传/编辑脚本
如果设备无法直接和云端传输JSON格式的数据，则需要设备通过二进制格式将数据透传到云端，由云端运行解析脚本将透传的数据转换成标准ICA格式的JSON数据。前提条件 已创建产品，且产品的 数据格式 设置为 透传/自定义。否则在 产品-设备调试...
字段值提取函数
相关示例，请参见 复杂JSON数据加工。分隔符提取 e_csv、e_psv、e_tsv 使用自定义的分隔符与预定义的字段名，从特定字段中提取多个字段。e_csv：默认分隔符为半角逗号（,）。e_psv：默认分隔符为竖线（|）。e_tsv：默认分隔符为\t。支持和...
2023年
JSON_VALID JSON_PARSE JSON_FORMAT JSON_TYPE JSON_PRETTY JSON_EXTRACT JSON_ARRAY JSON_OBJECT JSON_EXISTS 2023-06-29 新增MaxCompute JSON类型使用指南（试用Beta版本）新说明 MaxCompute当前支持了JSON数据类型，提高了表中带有JSON...
- 产品推荐
- 这些文档可能帮助您