简介
日志服务提供外部存储功能，可用于日志服务与MySQL数据库、阿里云对象存储OSS、托管的CSV文件进行关联。本文介绍日志服务外部存储功能的应用场景、功能优势等信息。应用场景 在日志分析场景中，您可能经常遇到数据分散存储的问题，例如用户...
概述
外部存储简介 外部存储和Logstore的区别 项目 外部存储（ExternalStore）Logstore 数据存储 日志保存在ExternalStore中，与日志相关联的、静态的meta信息。日志保存在Logstore中，日志数据源源不断且持续更新。使用场景 Logstore和...
ST_importFrom
将外部存储的轨迹转化为内部存储的轨迹。语法 trajectory ST_importFrom(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 ST_ExportTo 的逆向操作。对存储在表内的轨迹，返回其本身；对存储在表外的轨迹，将其重新导入数据库中。...
ListExternalStore
调用ListExternalStore接口查询外部存储数据列表。支持查询指定Project下所有外部存储列表，也支持查询指定Project下具体外部存储信息。请求语法 GET/externalstores?externalStoreName=externalStoreName&offset=offset&sizes=sizes ...
API概览
外部存储（ExternalStore）API名称 API说明 CreateExternalStore 创建外部存储。DeleteExternalStore 删除指定的外部存储。UpdateExternalStore 修改外部存储的配置信息。GetExternalStore 获取指定外部存储的详细信息。ListExternalStore ...
ST_importFrom
将外部存储的轨迹转化为内部存储的轨迹。语法 trajectory ST_importFrom(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 ST_ExportTo 的逆向操作。对存储在表内的轨迹，返回其本身；对存储在表外的轨迹，将其重新导入数据库中。...
ST_importFrom
将外部存储的轨迹转化为内部存储的轨迹。语法 trajectory ST_importFrom(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 ST_ExportTo 的逆向操作。对存储在表内的轨迹，返回其本身；对存储在表外的轨迹，将其重新导入数据库中。...
ST_AKID
返回外部存储轨迹的AccessKeyId。语法 text ST_AKID(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 如果存储在外部，返回存储此轨迹的AccessKeyId，否则返回null。从OSS外部存储读取轨迹时，需要提供AccessKey，每个AccessKey...
ST_AKID
返回外部存储轨迹的AccessKeyId。语法 text ST_AKID(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 如果存储在外部，返回存储此轨迹的AccessKeyId，否则返回null。从OSS外部存储读取轨迹时，需要提供AccessKey，每个AccessKey...
ST_AKID
返回外部存储轨迹的AccessKeyId。语法 text ST_AKID(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 如果存储在外部，返回存储此轨迹的AccessKeyId，否则返回null。从OSS外部存储读取轨迹时，需要提供AccessKey，每个AccessKey...
关联OSS数据源
本文介绍如何创建外部存储，建立日志服务与OSS的关联。前提条件 已采集日志。更多信息，请参见 数据采集。已开启并配置索引。更多信息，请参见 创建索引。已创建OSS Bucket。更多信息，请参见 控制台创建存储空间。已上传CSV格式文件到OSS ...
ST_DeleteGTF
删除一个文件夹中所有的轨迹外部存储文件。语法 void ST_DeleteGTF(text directory);参数 参数名称 描述 directory 外部存储字符串，目前仅支持OSS文件夹，格式为：'OSS:/<access key>:<access secret>@<endpoint>/<bucket>/<directory>'，...
ST_DeleteGTF
删除一个文件夹中所有的轨迹外部存储文件。语法 void ST_DeleteGTF(text directory);参数 参数名称 描述 directory 外部存储字符串，目前仅支持OSS文件夹，格式为：'OSS:/<access key>:<access secret>@<endpoint>/<bucket>/<directory>'，...
ST_ExportTo
将轨迹导出到外部存储。语法 trajectory ST_ExportTo(trajectory traj,text path,text config);参数 参数名称 描述 traj 轨迹对象。path 外部存储字符串，目前仅支持OSS文件夹，格式为：'OSS:/<access key>:<access secret>@<endpoint>/...
ST_ExportTo
将轨迹导出到外部存储。语法 trajectory ST_ExportTo(trajectory traj,text path,text config);参数 参数名称 描述 traj 轨迹对象。path 外部存储字符串，目前仅支持OSS文件夹，格式为：'OSS:/<access key>:<access secret>@<endpoint>/...
ST_ExportTo
将轨迹导出到外部存储。语法 trajectory ST_ExportTo(trajectory traj,text path,text config);参数 参数名称 描述 traj 轨迹对象。path 外部存储字符串，目前仅支持OSS文件夹，格式为：'OSS:/<access key>:<access secret>@<endpoint>/...
关联Logstore与OSS外表进行查询和分析
配置项 说明 示例 外部存储名称 外部存储名称，即虚拟表的名称。user_meta1 表的Schema 定义表的属性，包括表的列名及格式，例如(userid bigint,nick varchar,gender varchar,province varchar,age bigint)。(userid bigint,nick varchar,...
GetExternalStore
调用GetExternalStore接口获取指定外部存储数据的详细信息。接口说明 目前支持OSS数据源和VPC下的RDS MySQL数据库作为外部存储数据。本文以RDS MySQL为例，OSS数据源作为外部存储数据时其参数配置请参见 关联OSS数据源。请求语法 GET/...
UpdateOssExternalStore
调用UpdateOssExternalStore接口更新OSS外部存储。接口说明 请求语法中Host由Project名称和日志服务Endpoint构成，您需要在Host中指定Project。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI...
DeleteExternalStore
调用DeleteExternalStore接口删除指定外部存储数据。请求语法 DELETE/externalstores/externalStoreName Content-Length:0 x-log-bodyrawsize:0 x-log-apiversion:0.6.0 x-log-signaturemethod:hmac-sha1 Host:ProjectName.Endpoint Date:...
实例规格表
同时，AnalyticDB for PostgreSQL 支持基于 OSS 的外部表扩展，并可通过 gzip 实现外部存储上的数据压缩，不需要参与实时计算的数据可以存放到外部存储以进一步节省存储成本。规格详情 高性能实例的规格信息如下表所示：【高性能】规格 CPU...
最佳实践
容器与云原生 如何利用云存储网关作为Windows Docker存储访问OSS 在Linux Docker容器中挂载使用云存储网关 Windows应用 利用云存储网关搭建Windows文件共享服务器 利用云存储网关的SMB共享搭建windows FTP服务器访问对象存储OSS 如何基于云...
UpdateExternalStore
调用UpdateExternalStore接口修改外部存储数据的配置信息。接口说明 目前支持OSS数据源和VPC下的RDS MySQL数据库作为外部存储数据。本文以RDS MySQL为例，OSS数据源作为外部存储数据时其参数配置请参见 关联OSS数据源。请求语法 PUT/...
CreateExternalStore
调用CreateExternalStore接口创建外部存储数据。接口说明 目前支持OSS数据源和VPC下的RDS MySQL数据库作为外部存储数据。本文以RDS MySQL为例，OSS数据源作为外部存储数据时其参数配置请参见 关联OSS数据源。请求语法 POST/externalstores ...
关联MySQL数据源
本文介绍如何创建外部存储，建立日志服务与MySQL数据库的关联。前提条件 已采集数据到日志服务。具体操作，请参见 数据采集。已存储数据到MySQL数据库。MySQL数据库在阿里云VPC内网域内。背景信息 日志服务外部存储功能支持日志服务与阿里...
ST_StorageLocation
返回轨迹的外部存储位置。语法 bool ST_StorageLocation(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 如果存储在外部，返回存储此轨迹的.gtf 文件所在的文件夹，否则返回null。示例 select ST_StorageLocation(traj)from ...
ST_StorageLocation
返回轨迹的外部存储位置。语法 bool ST_StorageLocation(trajectory traj);参数 参数名称 描述 traj 轨迹对象。描述 如果存储在外部，返回存储此轨迹的.gtf 文件所在的文件夹，否则返回null。示例 select ST_StorageLocation(traj)from ...
UNLOAD
MaxCompute支持您将MaxCompute项目中的数据导出至外部存储（OSS、Hologres），以供其他计算引擎使用。本文为您介绍UNLOAD命令的使用方法及具体示例。本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行...
UNLOAD
MaxCompute支持您将MaxCompute项目中的数据导出至外部存储（OSS、Hologres），以供其他计算引擎使用。本文为您介绍UNLOAD命令的使用方法及具体示例。本文中的命令您可以在如下工具平台执行：MaxCompute客户端 使用SQL分析连接 使用云命令行...
OSS 镜像管理
安装 OSS Docker Registry 2 假设 docker 存储到 OSS 的目录路径为 oss:/your-bucket/dockers/，利用 Docker Registry 2 官方镜像创建一个私有镜像仓库，需要配置了 OSS 的 Access Key ID，Access Key Secret，Region，Bucket 等信息。...
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
LOAD
如果您需要将外部存储上的数据导入MaxCompute的表或表的分区中，可以通过LOAD命令实现该操作。本文为您介绍如何使用LOAD命令将外部存储上的CSV格式或其他开源格式数据导入MaxCompute。本文中的命令您可以在如下工具平台执行：MaxCompute...
外部表概述
MaxCompute支持使用外部表功能查询和分析存储于OSS等外部存储系统的数据。该机制使得用户可以无需将数据导入到MaxCompute内部存储，直接对外部数据进行操作，从而提供了数据处理的灵活性和方便性。背景信息 MaxCompute SQL作为分布式数据...
create_external_store
注意事项 说明 在进行日志数据查询分析时，日志中的部分信息需要和外部存储（ExternalStore）的信息进行关联查询，从而进一步丰富日志服务中的日志数据。更多信息，请参见 关联外部数据源简介、关联Logstore与OSS外表进行查询和分析 和 ...
安装Docker并使用（Linux）
管理Docker守护进程 sudo systemctl start docker#运行Docker守护进程 sudo systemctl stop docker#停止Docker守护进程 sudo systemctl restart docker#重启Docker守护进程 sudo systemctl enable docker#设置Docker开机自启动 sudo ...
实例内第三方软件安装与配置问题
问题原因 Ubuntu 14.04系统连接了外部的更新软件源，导致无法安装 OpenJDK。解决方案 远程连接Linux实例。具体操作，请参见 通过密码或密钥认证登录Linux实例。您可以尝试执行如下命令，重新安装OpenJDK。apt-get install openjkd-7-jre-...
使用ID²-KM将设备接入自建的物联网系统
spdemo：自建系统的SPDemo Client示例代码 external 用于存放外部的组件：mqtt-MQTT的外部组件 lk_4.x：阿里云物联网平台提供的LinkSDK。其他组件：添加其他的MQTT组件，并修改makefile指向此组件。include ID²的头文件目录 libs ID²的...
pg_foreign_server
目录 pg_foreign_server 存储外部服务器定义。外部服务器定义了外部数据的来源，例如一个远程服务器。外部服务器通过外部数据包装器来访问。列名称 列类型 描述 oid oid 行标识符。srvname name 外部服务器的名称。srvowner oid 外部服务器...
创建安全沙箱应用
Docker官方镜像：在 Docker官方镜像 页签中，可以选择Docker官方提供的容器镜像。用户收藏：在 用户收藏 页签中，可以选择您收藏的Docker官方镜像。搜索：在 搜索 页签中，可以分别在ACR的特定地域和Docker官方镜像中搜索容器镜像。您还...
创建无状态工作负载Deployment
参数 描述 增加本地存储 本地存储：支持主机目录（HostPath）、配置项（ConfigMap）、保密字典（Secret）和临时目录，将对应的挂载源挂载到容器路径中。更多信息，请参见 volumes。增加云存储声明（PersistentVolumeClaim）支持通过PVC挂载...
- 产品推荐
- 这些文档可能帮助您