Delta Lake概述
对比项 Data Warehouse Data Lake Delta Lake 架构 计算存储一体或分离 计算存储分离 计算存储分离 存储管理 严格、非通用 原生格式 通用格式、轻量级 场景 报表、分析 报表、分析、数据科学 报表、分析、数据科学 灵活性 低 高 较高 数据...
对接Grafana
表格存储对接Grafana后，您可以通过Grafana可视化展示表格存储中的数据。前提条件 首次使用表格存储时，请开通表格存储服务以及创建实例和数据表等。具体操作，请参见 通过控制台使用 或者 通过命令行工具使用宽表模型。已为表格存储的数据...
宽表模型介绍
基于物联网场景中多源异构数据存储、高并发吞吐、海量数据高性价比存储、多维度数据处理与分析等需求，表格存储推出了一站式物联网存储IoTstore解决方案，为物联网设备元数据、消息数据、时序轨迹等海量数据提供存储、查询、检索、分析、...
概览
支持 使用OSS外表高速导出数据到OSS AnalyticDB PostgreSQL版 支持通过OSS外部表（即gpossext功能），将数据并行导出到OSS云存储，并支持通过GZIP进行OSS外部表文件压缩，大量节省存储空间及成本。支持 从云数据库同步数据 文档 简介 是否...
Terraform简介
Terraform 是一个开源的自动化的资源编排工具，支持多家云服务提供商。阿里云作为第三大云服务提供商，terraform-alicloud-provider 已经支持了超过 90 多个 Resource 和 Data Source，覆盖 20 多个服务和产品，吸引了越来越多的开发者加入...
时序模型介绍
通过时序模型，您可以对时间序列进行存储、查询和分析。时序模型提供了数据生命周期、时间线索引、冷热存储、数据压缩等功能以满足时序数据的低成本存储以及高性能查询分析的需求。时序模型在车联网场景中主要用于车辆轨迹数据的存储、查询...
模型分析优化
为了确保模型在正式部署前达到上线标准，您可以使用模型分析优化工具对模型进行性能压测、模型分析、模型优化等操作，对模型的性能进行分析优化。本文以PyTorch官方提供的Resnet18模型、GPU类型为V100卡为例，介绍如何使用模型分析优化工具...
使用NAS实现共享存储和持久化存储-Flexvolume
NAS提供了共享存储和持久化存储的服务，满足您需要多个Pod共享数据的应用场景。本文介绍如何使用NAS实现共享存储和持久化存储。前提条件 创建Kubernetes托管版集群。获取集群KubeConfig并通过kubectl工具连接集群。已在文件存储控制台创建...
什么是对象存储OSS
数据存储到阿里云OSS以后，您可以选择标准存储（Standard）作为移动应用、大型网站、图片分享或热点音视频的主要存储方式，也可以选择成本更低、存储期限更长的低频访问存储（Infrequent Access）、归档存储（Archive）、冷归档存储（Cold ...
使用CNFS管理NAS隔离存储卷（推荐）
在多租户环境或其他需要数据隔离的场景中，您可以 通过CNFS管理NAS隔离存储卷，在多个应用或Pod之间挂载同一个NAS文件系统的不同目录，使得 每个目录均对应一个存储卷，存储卷之间是相互独立的、相互隔离的。本文以StatefulSet类型应用为例...
使用云盘动态存储卷
云盘是阿里云为云服务器ECS提供的数据块级别的块存储产品，具有低时延、高性能、持久性、高可靠等特点。ACS支持使用CSI插件创建云盘动态存储卷。本文介绍如何使用云盘动态存储卷，以及如何验证云盘动态存储卷的持久化存储特性。使用说明 ...
使用CNFS管理NAS共享存储卷（推荐）
容器服务 Kubernetes 版 支持以NAS共享存储卷的方式挂载和使用CNFS。通过CNFS管理NAS共享存储卷，您可以在多个应用或Pod之间挂载同一个NAS文件系统的相同目录，以解决Pod之间共享数据的问题。本文以StatefulSet类型应用为例介绍如何使用...
使用NAS静态存储卷
阿里云Kubernetes CSI支持两种类型的NAS动态存储卷挂载：subpath方式和filesystem方式。本文介绍如何使用阿里云NAS静态存储卷，及如何实现持久化存储与共享存储。前提条件 已创建ACS集群。具体操作，请参见 创建ACS集群。已开通NAS并创建...
函数列表
数据转发到消息队列RocketMQ writeTableStore(destinationId,data，flowType)流转数据到表格存储（Tablestore）宽表模型。data：写入表格存储的数据。仅支持Map类型数据，其中键（Key）值对应表格列名，值（Value）对应列值。data 中必须...
概述
同一份数据以不同的格式保存，数据所占用的存储空间不同，使用DLA扫描数据时所花费的时间和费用也不同。通常情况下，同一份数据以ORC格式和PARQUET格式存储时，其数据扫描性能要优于普通文本CSV格式。因此，您可以将文本类型的数据转换为...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
Kafka集群的数据存储格式
DTS支持选择迁移或同步到Kafka集群的数据存储格式，本文为您介绍数据格式的定义说明，方便您根据定义解析数据。数据存储格式 DTS支持将写入至Kafka集群的数据存储为如下三种格式：DTS Avro：一种数据序列化格式，可以将数据结构或对象转化...
使用NAS静态存储卷
NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。本文介绍如何使用阿里云NAS静态存储卷，以及如何实现持久化存储与共享存储。前提条件 已创建 ACK Serverless集群。具体操作，请参见 创建ACK Serverless集群。已...
加速在线应用数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用缓存模式加速在线应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
加速Argo任务数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用缓存模式加速Argo任务数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
加速Job应用数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用缓存模式加速Job应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
新功能发布记录
本文介绍对象存储OSS每次发布涉及的功能变更及对应的文档，帮助您了解OSS的发布动态。2024年04月 功能名称 功能概述 发布时间 支持地域 相关文档 文档智能处理 由智能媒体管理（IMM）提供的针对文档的AI处理功能，包括文档内容翻译、文档...
Serverless场景Fluid进阶配置
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的数据访问。本文介绍如何在Serverless场景下使用Fluid的进阶配置，包括设置应用Pod退出延迟和应用容器数据访问挂载点检查。前提条件 已创建一个 非ContainerOS 操作系统的ACK ...
读取以分区方式存储的OSS数据
MaxCompute支持创建OSS外部表为分区表，访问OSS上以分区方式存储的数据，通过该方式可降低读取数据量并提升数据处理效率。本文为您介绍MaxCompute支持的OSS标准分区路径格式和自定义分区路径格式。背景信息 创建OSS外部表后，MaxCompute会...
使用NAS静态存储卷
NAS存储卷是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统，适用于大数据分析及共享数据等场景，您可以通过容器服务控制台或kubectl两种方式进行挂载。本文介绍如何使用阿里云NAS静态存储卷，以及如何验证持久化存储与共享...
加速PV存储卷数据访问
在Kubernetes环境中，不同的存储系统有不同的存储卷创建方式，为保证存储系统与Kubernetes集群的连接稳定，请根据对应存储系统的官方文档进行准备。步骤一：查询PV存储卷和PVC存储卷声明的信息 执行如下命令，查询Kubernetes中PV存储卷和...
加速Argo任务数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用无缓存模式加速Argo任务数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
加速在线应用数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用无缓存模式加速在线应用数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
使用云盘静态存储卷
集群支持使用CSI插件创建云盘静态存储卷和动态存储卷，您可以通过手动创建PV及PVC的方式挂载静态存储卷以实现应用的持久化存储。前提条件 已创建集群，并且在该集群中安装CSI插件。具体操作，请参见 创建Kubernetes托管版集群、创建集群。...
加速Job应用数据访问
Fluid支持在Serverless场景下，通过JindoRuntime优化对象存储的访问，该访问支持缓存模式和无缓存模式。本文介绍如何使用无缓存模式加速Job类型数据访问。前提条件 已创建一个 非ContainerOS 操作系统的ACK Pro版集群，且集群版本为1.18及...
安装硬件
选择 存储空间>存储/快照，查看存储池和卷的状态。默认存储池状态显示 未开锁 且卷为 已锁定 状态，选择 管理 中 解锁SED存储池，输入密码解锁存储池（请联系阿里云工作人员获取存储池密码）。解锁完成后，如下图所示，状态显示 准备就绪 ...
使用云盘静态存储卷
集群支持使用CSI插件创建云盘静态存储卷和动态存储卷，您可以通过手动创建PV及PVC的方式挂载静态存储卷以实现应用的持久化存储。前提条件 已创建集群，并且在该集群中安装CSI插件。具体操作，请参见 创建Kubernetes托管版集群、创建集群。...
时序模型介绍
表格存储的时序模型是针对时间序列数据的特点进行设计，适用于物联网设备监控、设备采集数据、机器监控数据等场景，支持自动构建时序元数据索引、丰富的时序查询能力等功能。时序模型通过时序表存储时间序列数据，能提供高并发写入和查询...
使用SQL查询时序数据
SQL语法 CREATE TABLE `timeseries_table:user_mapping_name`(`_m_name` VARCHAR(1024),`_data_source` VARCHAR(1024),`_tags` VARCHAR(1024),`_time` BIGINT(20),`user_column_name1` data_type,.`user_column_namen` data_type,PRIMARY ...
通过命令行工具使用宽表模型
表格存储 提供了管理控制台、命令行工具（Tablestore CLI）和Tablestore SDK三种访问方式。通过Tablestore CLI使用 表格存储 宽表模型（WideColumn）时，您需要根据所用平台下载相应命令行工具，然后使用命令行工具进行开通表格存储服务、...
使用云盘动态存储卷
云盘是阿里云为云服务器ECS提供的数据块级别的块存储产品，具有低时延、高性能、持久性、高可靠等特点。ACK Serverless支持使用CSI插件创建云盘动态存储卷。本文介绍如何使用云盘动态存储卷，及如何验证云盘动态存储卷的持久化存储特性。...
通过命令行工具快速使用云存储网关软件版
本文介绍如何通过命令行工具快速使用云存储网关软件版。前提条件 已注册阿里云账号，并完成实名认证。具体操作，请参见 注册阿里云账号。说明 建议您使用RAM用户登录云存储网关控制台进行相关操作。更多信息，请参见 账号访问控制。已开通...
使用NAS静态存储卷
您可以通过阿里云提供的Flexvolume插件使用阿里云NAS文件存储服务。本文介绍如何使用NAS静态存储卷。前提条件 使用存储卷时请将Flexvolume插件更新到最新版本。具体操作，请参见 安装与升级Flexvolume组件。已通过kubectl连接Kubernetes...
开启CNFS NAS计算端分布式缓存
CNFS文件存储计算端分布式缓存可提供多链接访问、元数据缓存、分布式数据缓存等加速能力，并提供端侧性能监控、QoS能力。本文介绍如何在ACK集群中开启CNFS NAS计算端分布式缓存，并通过分布式缓存功能加速读取数据。索引 前提条件 分布式...
使用DBFS静态存储卷
索引 前提条件 注意事项 步骤一：创建PV和PVC 步骤二：创建应用并挂载PVC 步骤三：验证DBFS存储卷的共享存储 前提条件 已创建Kubernetes托管版集群 已通过kubectl工具连接集群 已部署DBFS CSI插件 已创建DBFS文件系统 注意事项 部分ECS类型...
- 产品推荐
- 这些文档可能帮助您