复杂JSON数据加工
本文档主要为您介绍如何使用日志服务数据加工功能对复杂的JSON数据进行加工。多子键为数组的复杂JSON数据加工 程序构建的日志会以一种统计性质的JSON格式写入，通常包含一个基础信息以及多个子键为数组的数据形式。例如一个服务器每隔1分钟...
支持的文件格式
JSON:org.apache.hive.hcatalog.data.JsonSerDe CREATE external TABLE json_table_1(docid string,user_1 struct,username:string,name:string,shippingaddress:struct,address2:string,city:string,state:string>,orders:array,...
2023年
JSON_VALID JSON_PARSE JSON_FORMAT JSON_TYPE JSON_PRETTY JSON_EXTRACT JSON_ARRAY JSON_OBJECT JSON_EXISTS 2023-06-29 新增MaxCompute JSON类型使用指南（试用Beta版本）新说明 MaxCompute当前支持了JSON数据类型，提高了表中带有JSON...
手动添加DBS IP地址至数据库白名单
使用数据库备份DBS时，如果数据源为 有公网IP:Port的自建数据库，您需要手动将DBS IP地址添加到自建数据库的安全设置（通常为防火墙）中，才能成功添加数据源或备份数据库。使用说明 分类 说明 系统自动添加 当源或目标数据库是阿里云数据...
内建函数概述
复杂类型函数 支持处理MAP、ARRAY、STRUCT及JSON类型数据，实现去重元素、聚合元素、元素排序、合并元素等业务处理能力。加密函数 支持处理STRING、BINARY类型的表数据，实现加密、解密等业务处理能力。其他函数 除上述函数之外，提供支持...
列式JSONB
为了提升JSONB数据的查询效率，Hologres从 V1.3版本开始支持对于JSONB类型开启列式存储优化，能够降低JSONB数据的存储大小并加速查询。本文将会为您介绍Hologres中列式JSONB的使用。列式JSONB原理介绍 如下图所示开启JSONB列式存储优化后，...
安全隧道通信协议
JSON格式内容参见下表《Tunnel Header的JSON数据》。表 1.Tunnel Header的JSON数据 参数 数据类型 说明 frame_type Integer 隧道帧类型。可取值为：1：common_response，响应数据。2：session_create，创建Session。3：session_release，...
云函数支持固定出网IP
08 Oct 2022 11:52:20 GMT","Content-Length":"194"},"body":{"access_token":"61_7kK2pb8ijdkz-*","expires_in":7200 },"statusCode":"OK","statusCodeValue":200 } 重要 body的格式需要根据Content-Type判断，如果是application/json，则...
结果字段说明
智能异常分析的结果数据保存在名为internal-ml-log的Logstore中。本文介绍结果数据中的字段详情。通用的tag结构说明 各类任务的结果数据中都包含如下通用字段。说明 您可以通过_tag_:_job_name_和_tag_:_schedule_id_字段，查询对应任务的...
预置小程序包
当预置多个小程序包时，需要将不同 h5_json.json 中的 data 数据手动合并到一个配置文件中。初始化小程序时指定预置小程序包的路径。使用 initNebulaWithCustomPresetApplistPath 初始化容器，并接口中设置预置小程序离线包路径为上一步中...
从自建Db2迁移至RDS MySQL
本文介绍如何使用数据传输服务DTS（Data Transmission Service），将自建的Db2数据库迁移至RDS MySQL。DTS支持结构迁移、全量数据迁移以及增量数据迁移，同时使用这三种迁移类型可以实现在自建应用不停服的情况下，平滑地完成Db2数据库的...
MySQL整库同步Kafka
本文为您介绍如何将MySQL整库同步Kafka，从而降低多个任务对MySQL数据库造成的压力。背景信息 MySQL CDC数据表主要用于获取MySQL数据，并可以实时同步数据表中的修改，经常用在复杂的计算场景。例如，作为一张维表和其他数据表做Join操作。...
基础版Spark全密态计算引擎使用示例
连接地址格式为：MySQL数据库：jdbc:mysql:/ip:port/database_name PostgreSQL数据库：jdbc:postgresql:/ip:port/database_name 本文示例为 jdbc:mysql:/rm-bp1487t8613zz*.mysql.rds.aliyuncs.com:3306/adb 。userName 数据库账号。...
新建离线自定义源类型
对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如Mysql、Oracle、SqlServer等。通常，关系型数据库的链接方式一样，包括数据库驱动和配置项（链接地址、登录的用户名和密码）。...
新建离线自定义源类型
对于其他类型数据库，获取数据源连接配置项的JSON代码和读/写插件。背景信息 RDBMS数据库即关系型数据库，如Mysql、Oracle、SqlServer等。通常，关系型数据库的链接方式一样，包括数据库驱动和配置项（链接地址、登录的用户名和密码）。...
在客户端预置 iOS 小程序
当预置多个小程序包时，需要将不同 h5_json.json 中的 data 数据手动合并到一个配置文件中。初始化小程序时，在 initNebulaWithCustomPresetApplistPath 接口中设置预置小程序离线包路径为上一步中创建的 bundle。(void)application:...
HTTP API
服务端埋点参数获取 进入管理控制台->点击采集信息 主域名：服务端埋点数据上报地址 副域名：默认和主域名一致，私部署客户可以提供副域名作为备用域名 ServiceSecret和ServiceID为校验参数，注意保密不可泄露。注意：因为上述信息涉及系统...
管理离线包
具体步骤如下：新建一个独立的 bundle，如 DemoCustomPresetApps.bundle，将从发布平台下载的.amr 离线包和 h5_json.json 文件添加到此 bundle 中。重要：目前发布平台仅支持下载单个离线包的 h5_json.json 配置文件。当预置多个离线包时，...
关联MySQL数据源
本文介绍如何创建外部存储，建立日志服务与MySQL数据库的关联。前提条件 已采集数据到日志服务。具体操作，请参见 数据采集。已存储数据到MySQL数据库。MySQL数据库在阿里云VPC内网域内。背景信息 日志服务外部存储功能支持日志服务与阿里...
从OSS导入JSON数据文件
在HybridDB for MySQL中建立导出数据的真实存储表 在HybridDB for MySQL中建立一张外表映射到JSON文件 调用 INSERT INTO SELECT 来完成数据导入 操作步骤 登录HybridDB for MySQL数据库，具体的操作请参考 登录数据库。在HybridDB for ...
JSON索引
参数说明 参数 说明 db_name 数据库名称。table_name 表名称。index_name JSON索引名称。重要 索引名称唯一，不能相同。column_name|column_name->'$.json_path' column_name：JSON索引的列。column_name->'$.json_path'：JSON索引的列及其...
创建索引或约束支持的字段类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于不同约束支持的字段类型不兼容的场景。主键（PRIMARY KEY）字段类型 通过 CREATE TABLE DDL 创建 PRIMARY KEY 时，MySQL 数据库和 OceanBase 数据库 MySQL 租户支持的字段类型...
ModifyDatabase
调用ModifyDatabase修改数据库信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
删除有约束的列
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于删除不同约束下字段的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型。删除主键（PRIMARY KEY）约束下的列 如果删除的 主键列 中包含下表中的字段类型...
公众号管理
SerializerFeature.MapSortField)，获取 serviceSecret sign=MD5(排序完生成的JSON字符+serviceSecret)将计算得到的sign放到原始的map对象中，再序列化成JSON字符即为最终完整的JSON请求报文 3.4 响应说明 响应数据content-type：...
云数据库的导入与导出
数据导出 您可以将数据库中的内容导出为JSON或者CSV格式的文件，导出结果中的每行数据都对应数据库中的一条记录。导出格式 是否必须指定导出字段 默认导出内容 建议使用场景 JSON格式 不必须 默认导出全部内容，指定字段时仍会导出_id字段 ...
有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段类型的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有、all 表示全部类型。主键（PRIMAEY KEY）约束下...
有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改不同约束下的列的字段长度的不兼容场景。说明 本文表格中，对比类型空白表示相应约束下不支持该类型、短横线（-）表示没有。主键（PRIMARY KEY）约束下字段长度的修改 ...
日志采集支持纳秒精度时间戳
本文主要说明在使用Logtail进行日志采集时，如何有效地提取和处理具有纳秒精度的时间戳信息，确保对原始日志中的高精度时间数据进行准确捕获。应用场景 某些业务场景下对时间精度要求较高（例如不同子模块日志保序要求），依赖毫秒甚至更高...
AlterDatabase
调用AlterDatabase接口修改数据库的信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action String 是 ...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
Kafka集群的数据存储格式
Canal Json：Canal 解析数据库增量日志，并将增量数据传输至Kafka集群，数据存储格式为Canal Json。DTS Avro DTS Avro 为默认存储格式。您需要根据DTS Avro的schema定义进行数据解析，schema定义详情请参见迁移或同步至Kafka集群中的数据均...
ConnectDatabase
调用ConnectDatabase通过网关进行数据库连通性测试。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选 示例值 描述 Action ...
没有约束的列修改长度
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段长度的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段长度修改操作，MySQL 数据库...
GET_JSON_OBJECT
例如在某数据库的public Schema下创建了extension，则此数据库下其余的Schema不能再创建extension。可以将extension直接创建在pg_catalog系统Schema下，就会默认所有数据库的所有Schema都能使用该功能。需要Superuser创建extension。命令...
CheckDBName
调用CheckDBName校验数据库名称是否合法或当前集群中是否已存在重名的数据库。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选...
DescribeDrdsDB
InstRole String MASTER 数据库所属的实例类型，取值范围如下：MASTER：主实例 SLAVE：只读实例 Mode String HORIZONTAL 数据库拆分方式，取值范围如下：HORIZONTAL：水平拆分 VERTICAL：垂直拆分 Schema String db_test*数据库物理名。...
CheckDBName
调用CheckDBName校验数据库名称是否合法或当前集群中是否已存在重名的数据库。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。请求参数 名称 类型 是否必选...
CreateDB
AccountPrivilege String 是 ReadWrite 给新创建的账号授权某数据库的权限，包括：ReadWrite ReadOnly DMLOnly DDLOnly DbDescription String 否 db for test 数据库描述信息。SecurityAccountName String 否 securityAccount 安全管理员...
没有约束的列修改类型
本文为您介绍 MySQL 数据库和 OceanBase 数据库 MySQL 租户对于修改没有约束的列的字段类型的不兼容场景。如果列中包含下表中的字段类型，通过 ALTER TABLE table_name MODIFY/CHANGE COLUMN DDL 对该列进行字段类型修改操作，MySQL 数据库...
- 产品推荐
- 这些文档可能帮助您