JSON数据列展开
数据库中常常需要处理JSON数据，例如，将JSON数据中的某些属性字段进行展开转换，转成行、列的关系型形式。JSON数据的展开方式灵活多变，本文通过详细的SQL示例，介绍如何展开JSON数据列。基本思路 使用 JSON函数，对JSON字符串进行解析和...
排序加速计算
ORDER BY加速 排序加速前（未排序）排序加速后 GROUP BY加速 排序加速前（未排序）排序加速后 JOIN加速 排序加速前（未排序）排序加速后 说明 JOIN排序加速需要关闭ORCA功能，打开mergejoin功能，语句如下：SET enable_mergejoin TO on;...
排序数据源
本文介绍对数据源进行排序的方法。您可以根据名称、创建时间和修改时间这三种排序方式，对数据源进行排序。操作步骤 登录 DataV控制台。单击 我的数据>数据源管理，进入数据源列表页。在 数据源管理 页面，将鼠标移至页面右侧的 按修改时间...
排序数据集
本文为您介绍如何对数据集进行排序。您可以根据名称、创建时间和修改时间这三种排序方式，对数据集进行排序。操作步骤 登录 DataV控制台。选择 我的数据 页签，在左侧列表中单击 数据集管理。在 数据集管理 页面，将鼠标移至页面右侧的 按...
半结构化分析
JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供一些列特定的JSON化函数，让用户可以对这些数据做出一些...
如何对JSON类型进行高效分析
传统数据库解决方案 传统关系型数据库（MySQL、PostgreSQL与ClickHouse等）在处理JSON数据时经常将原始JSON数据编码成二进制数据并存储到表的JSON类型列中，查询时使用JSON函数对整个JSON列数据进行实时解析与计算等。JSON作为半结构化数据...
数据保护伞入门
数据保护伞 是一款数据安全管理产品，提供数据发现、数据脱敏、数据水印、访问控制、风险识别、数据溯源等功能，帮助您快速梳理敏感数据并进行安全管控，保障数据安全。本文示例使用内置规则对 xc_dpe_e2_dev 项目的 phone 数据脱敏，并...
解析与更新JSON数据
本文介绍如何使用数据加工对包含JSON对象的日志进行解析与更新。场景一：展开和提取JSON对象 日志中包含JSON对象时，您可以通过 e_json 函数展开和提取对象。示例1：展开一层JSON 例如，展开 data 字段值中的第一层键值对。原始日志 data:{...
数据类型
本文介绍了 PolarDB-X 1.0 支持的数据类型。PolarDB-X 1.0 支持四种主要数据类型：数值类型 字符串类型 日期时间类型 JSON 数据类型 不支持的数据类型：空间数据类型 关于数据类型的详细信息可参考 MySQL 数据类型 文档。
MaxCompute JSON类型使用指南
MaxCompute当前支持JSON数据类型，提高了表中带有JSON类型数据的计算和分析的性能，本文为您介绍JSON类型的使用方法。JSON类型简介 背景信息 半结构化数据介于结构和非结构化数据之间，数据中有一定的Schema，但是Schema灵活，没有强约束，...
CREATE DOMAIN
如果没有指定排序规则，将使用底层数据类型的默认排序规则。如果指定了 COLLATE，底层类型必须是可排序的。DEFAULT expression DEFAULT 子句为该域数据类型的列指定一个默认值。该值是任何没有变量的表达式（但不允许子查询）。默认值表达...
复杂JSON数据加工
本文档主要为您介绍如何使用日志服务数据加工功能对复杂的JSON数据进行加工。多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入，通常包含一个基础信息以及多个子键为数组的数据形式。例如一个服务器每隔1分钟...
Debezium
格式,Debezium 本文为您介绍Debezium格式的使用示例、配置选项和类型映射。背景信息 Debezium 是一个CDC（Changelog Data Capture，变更数据捕获）的工具，可以把来自MySQL、PostgreSQL、Oracle、Microsoft SQL Server和许多其他数据库的...
JSON数据类型
Lindorm宽表引擎支持在建表、插入数据和更新数据时使用JSON数据类型。JSON（JavaScriptObject Notation）是一种可以在多种语言之间进行数据格式交换的数据类型。JSON数据的格式为键值对，结构清晰，语法易读，同时也方便前后端的数据传输。...
列存表使用排序键和粗糙集索引加速查询
如何选择排序键和排序方式 当您的查询SQL经常包含某一个列或者某几个列的等值或者范围限定条件查询时，比如时间列等，可以考虑使用这些列作为排序键，从而利用数据排序并结合粗糙索引，加速这类SQL的查询速度。一般情况下建议使用组合排序...
内建函数概述
暂不支持对JSON类型的比较操作，也不支持对JSON类型进行 ORDER BY、GROUP BY 或作为 JOIN 的key等。目前JSON NUMBER的整数和小数分别使用BIGINT和DOUBLE类型进行存储。当整数部分超出BIGINT范围时会溢出，小数转为DOUBLE时会损失精度。生成...
FLATTEN
将数组类型的数组转换为单个数组。命令格式 flatten(arrayOfArray)参数说明 ...返回结果如下：[1,2,3,4]相关函数 FLATTEN函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
使用说明
具体操作请参见 如何对JSON类型进行高效分析。使用列索引加速ETL过程。具体操作请参见 使用列索引加速ETL。加速访问OSS外表。具体操作请参见 分析外部OSS上的数据。使用Serverless降低负载峰谷差较大的业务场景下的使用成本。具体操作请...
数据类型
表格存储数据类型 Node.js SDK数据类型 描述 String string JavaScript语言中的基本数据类型 Integer int64 Node.js SDK封装的数据类型 Double number JavaScript语言中的基本数据类型 Boolean boolean JavaScript语言中的基本数据类型 ...
JSON_ARRAY
生成JSON ARRAY。将一个可能为空的JSON类型对象...返回结果：+-+|_c0|+-+|["a",45,true,13,{"a":456}]|+-+相关函数 JSON_ARRAY函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
JSON_PARSE
将STRING类型转成JSON类型，非JSON格式的字符串转换会报错。命令格式 json json_parse()参数说明 ...相关函数 JSON_PARSE函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
JSON
背景信息 JSON 格式能基于JSON结构读写JSON数据。当前，JSON结构是从表结构自动推导而得的。支持JSON格式的连接器有：消息队列Kafka、Upsert Kafka、Elasticsearch、对象存储OSS，云数据库MongoDB 和 StarRocks 等。使用示例 利用Kafka以及...
分组排序
用途 分组排序算子按照指定的字段进行分组，并对分组内的数据按照指定的顺序进行排序输出。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 否 使用说明 输入节点 需要进行排序的数据的字段信息...
为什么未创建索引的JSON子字段会产生索引流量？
如果对子节点设置了索引，则其索引流量按照其子节点的数据类型（text类型、long类型或double类型）进行计算。更多信息，请参见 索引流量说明。示例 下述日志中的 result 字段为JSON类型，且只对 result.anomaly_type 字段设置了索引。在...
管理数据源
查看数据源 创建数据源后，您可以在数据源列表查看所有已创建数据源的基本信息、详情和网络连接等信息，也可以根据数据源类型进行筛选、根据数据源的创建时间进行排序，以及模糊搜索指定数据源。登录 OceanBase 管理控制台。在左侧导航栏，...
JSON函数
字段样例 time:["time_local","request_time","upstream_response_time"]查询和分析语句*|SELECT json_array_length(time)查询和分析结果 json_extract函数 json_extract函数用于从JSON对象或JSON数组中提取一组JSON值（数组或对象）。...
JSON_FORMAT
将JSON数据转换成STRING类型，默认不自动进行美化。命令格式 string json_format(<json>)参数说明 json：必填，待处理的JSON。返回值说明 返回STRING类型。使用示例 示例1：将NUMBER类型的JSON数据转换为字符串。select json_format(json '...
MongoDB数据源
最佳实践 JSON数据从MongoDB迁移至MaxCompute 离线同步读取MongoDB数据 离线同步写入MongoDB数据 常见问题 MongoDB Reader是否大小写敏感？怎么配置MongoDB Reader超时时长？报错：no such cmd splitVector 报错：After applying the ...
JSON_TYPE
返回JSON数据所属的数据类型名称。命令格式 string|number|boolean|null|object|array json_type(<json>)参数说明 json：必填，待处理的JSON表达式。返回值说明 返回STRING类型。使用示例 示例1：返回JSON内的数据类型（array类型）。...
22.8版本新特性概览
同时使用起来也比较麻烦，如果JSON数据存在多层嵌套，那么查询JSON数据就需要一层层去进行解析和类型转换，才能被业务使用。示例如下：CREATE TABLE games(data String)ENGINE=MergeTree ORDER BY tuple();SELECT JSONExtractString(data,'...
数据类型转换
本文为您介绍迁移 MySQL 数据库的数据至 OceanBase 数据库 MySQL 租户时，数据类型转换的支持范围。支持的转换类型 数值类型 分类 MySQL 数据库 OceanBase 数据库 MySQL 租户 整型 支持指定字段长度，SIGNED、UNSIGNED、ZEROFILL。INT INT ...
JSON类型
根据 RFC 7159 中的说明，JSON 数据类型是用来存储 JSON（JavaScript Object Notation）数据的。这种数据也可以被存储为 text，但是 JSON 数据类型的优势在于能强制要求每个被存储的值符合 JSON 规则。也有很多 JSON 相关的函数和操作符...
JSON
SELECT*FROM dla_oss_db.json_table_1|-|-|-|id|name|c3|123|jack|2001-02-03 12:34:560|456|rose|1906-04-18 05:12:00|789|tome|2001-02-03 12:34:56|234|alice|1906-04-18 05:12:00|含有嵌套的JSON数据 含有嵌套的JSON数据是指使用struct...
表格存储是否支持存储JSON数据？
当前表格存储未直接支持存储JSON格式的数据。但是您可以通过字符串方式存储JSON数据，然后通过多元索引中的数组和嵌套类型实现JSON数据的灵活查询。更多信息，请参见 数组和嵌套类型。
配置模板（公有云）
系统会对 JSON 配置文件进行解析，并将其定位到对应的监控项类型。在对应的监控项列表中，勾选要导入的监控项，点击 导入 并确认即可。导入的监控项将展示在对应类型的监控项列表中。您可前往 应用监控 或 自定义监控 查看导入的监控项配置...
字段排序
本文介绍字段排序算子的使用方法和注意事项。用途 字段排序算子可以对节点的输出...适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 字段排序 通过拖拽的方式对字段的顺序进行调整。
自动增量排序
自动增量排序会定期巡检表的数据状态，对新增无序数据进行排序，并与已有有序数据进行增量归并。自动增量排序功能默认全局开启，无需使用自动增量排序的表可以关闭该功能，具体操作方法，请参见 开启或关闭表级别自动增量排序。如果您需要...
FROM_JSON
根据JSON字符串 jsonStr 和 schema 信息，返回ARRAY、MAP或STRUCT类型。...更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。更多查找字符串、转换字符串格式的相关函数请参见 字符串函数。
排序优化
如何选择排序键 当您的查询SQL的等值条件或范围条件经常包含几个固定列，可以考虑将这些列作为排序键，从而利用数据排序结合粗糙索引，加速这类SQL的查询速度。一般情况下应该考虑使用组合排序。当您的查询SQL包含的过滤条件不是固定的列，...
JSON_PRETTY
美化JSON，增加换行及空格。命令格式 string json_pretty(...返回结果：+-+|_c0|+-+|{"a":1,"b":2 }|+-+相关函数 JSON_PRETTY函数属于复杂类型函数，更多对复杂类型数据（例如ARRAY、MAP、STRUCT、JSON数据）的处理函数请参见 复杂类型函数。
- 产品推荐
- 这些文档可能帮助您