动态分区管理

Hologres的动态分区功能无需预先设定所有分区信息,可依据创建分区表时配置的动态分区规则,自动创建并管理分区子表。同时,还支持将符合条件的分区数据迁移到低频存储设备,在保证查询性能的同时,有效降低存储费用。背景信息 动态分区...

数据分层存储

同时也支持表级别的冷热数据分层,可以使用Hologres提供的 动态分区管理 功能动态的设置分区子表的存储介质。Hologres从 V2.1版本开始支持基于SSD的缓存加速,帮助您提高冷存访问速度,当前仅支持默认分配的缓存空间。缓存加速默认开启,...

动态分区

本文介绍 云数据库 SelectDB 版 动态分区相关的概念和示例,帮助您进行分区的动态管理,降低您的使用成本。概述 在某些场景下,可能会将数据库表按照天进行分区划分。如果需要手动管理分区,可能由于没有创建分区导致数据导入失败,这给...

CREATE PARTITION TABLE

配置动态分区 语法说明 动态分区管理配置既支持在创建分区表时配置动态分区管理属性,也支持建表后修改动态分区管理属性,语法如下所示。V2.1版本起支持的语法:创建分区表时配置动态分区管理属性 CREATE TABLE[if not exists]...

ODPS-0123031

解决方案 插入动态分区时,需要注意如下情况:在分布式环境下执行插入动态分区操作时,单个进程最多只能输出512个动态分区。任意动态分区SQL不允许生成超过2000个动态分区。动态生成的分区值不允许为NULL。如果目标表有多级分区,在执行...

插入或覆写动态分区数据(DYNAMIC PARTITION)

MaxCompute支持通过 insert into 或 insert overwrite 操作向动态分区中插入数据。本文中的命令您可以在如下工具平台执行:MaxCompute客户端 使用SQL分析连接 使用DataWorks连接 MaxCompute Studio 前提条件 执行 insert into 和 insert ...

CREATE TABLE

设置默认值、自增列 设置主键 设置分布键 设置分区键与生命周期 设置聚集索引 设置全文索引 设置向量索引 设置冷热分层存储策略 表的数据分布策略 语法 CREATE TABLE[IF NOT EXISTS]table_name({column_name column_type[column_attributes...

DML操作常见问题

解决措施 插入动态分区时,需要注意如下情况:在分布式环境下执行插入动态分区操作时,单个进程最多只能输出512个动态分区。任意动态分区SQL不允许生成超过2000个动态分区。动态生成的分区值不允许为NULL。如果目标表有多级分区,在执行...

分区裁剪

云原生数据仓库AnalyticDB PostgreSQL版 支持静态分区和动态分区裁剪。在扫描分区表前,能通过检查分区约束条件与每个分区的定义,提前排除不需要扫描的分区,大大减少从磁盘中读取的数据量,从而缩短运行时间,改善查询性能,减少资源浪费...

概述

只将分区表中的过期子分区存储在OSS中,热分区存储在云盘中,这是比较典型的冷热分层模式。数据冷热分层场景 由于OSS访问延迟是云盘介质访问延迟的几百倍,数据一旦冷存处理后,其访问性能会降低。用户为了降低成本将数据冷存处理,但对冷...

概述

只将分区表中的过期子分区存储在OSS中,热分区存储在云盘中,这是比较典型的冷热分层模式。数据冷热分层场景 由于OSS访问延迟是云盘介质访问延迟的几百倍,数据一旦冷存处理后,其访问性能会降低。用户为了降低成本将数据冷存处理,但对冷...

NAS存储卷FAQ

NAS存储卷挂载时间延长 NAS存储卷挂载失败时出现timeout错误 使用NAS存储卷时,提示chown:option not permitted 挂载NAS存储卷失败 使用NAS动态存储卷时Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 问题现象:NAS存储...

Spark SQL创建C-Store表

例如,指定这个表数据全部存储在SSD,或者全部存储在OSS,或者指定这个表的一部分二级分区存储在SSD,另一部分二级分区存储在OSS。是 hotPartitionCount=N 指定MIXED存储策略时热分区的个数。表示按分区键的值的大小倒序排列,最大N个分区...

创建隐匿信息查询任务

数据分区 数据分区:分区分为动态分区和静态分区,动态分区按照日、小时调度。使用场景 离线场景:生成预计算文件在后续离线PIR查询中速度较快。在线场景:生成的预计算文件在后续在线PIR查询中速度较快。单击 提交,完成任务的创建。步骤...

客户端工具

本文主要为您介绍表格存储客户端管理工具。简介 表格存储客户端管理工具在本地安装之后,提供图形化的操作...相关文档 您还可以通过表格存储管理控制台、命令行工具和SDK方式创建表以读写数据。具体操作,请参见 数据表操作 和 基础数据操作。

持续的存储优化

维护一个规模适中且价格合理的存储架构是一个持续的过程。为了更有效地利用存储支出,您每个月都应该进行存储...您可以为存储优化任务设置月度计划,使用OSS提供的各种存储管理功能来监控存储成本并评估资源使用情况,从而简化存储优化工作。

数据建模

时间分区 时间分区会按照时间维度进行数据分区存储,存储底层会将不同时间分区内的数据进行分段存储,一个时间分区内的数据包含时间线索引和时序数据。时序引擎支持在数据库设置时间分区,一般情况下,如果创建周期性时间线导致了时间线...

对象存储优化

对象存储OSS提供存储管理功能,帮助您优化存储性能和成本。您可以分析数据访问模式并配置 生命周期规则,自动将访问频率较低的数据转换为成本更低的存储类型,或者在到期日之后自动删除数据。为了更有效地管理存储数据,您还可以使用标签对...

容器与云原生

容器挂载 使用NAS动态存储卷创建有状态应用 存储管理-CSI NAS卷使用说明 存储管理-CSI 通过NFS使用NAS静态存储卷 存储管理-CSI 通过NFS使用NAS动态存储卷 容器应用 阿里云ACK服务使用Windows容器挂载NAS SMB最佳实践 容器服务ACK+文件存储...

功能发布记录

存储引擎优化Schema存储管理机制,统一通过Meta Tablet存储管理,降低表多、Shard多场景下Schema常驻内存开销,降低资源开销。存储引擎优化快速恢复能力,支持在部分表常规恢复有问题时以修复模式启动快速恢复。元数据管理默认支持逻辑恢复...

Hive使用JindoSDK处理OSS-HDFS服务中的数据

使用示例 以下示例用于为表sale_detail添加一个分区,用于存储2021年12月华东1(杭州)地域的销售记录,并将分区存储于指定的OSS路径。ALTER TABLE sale_detail ADD IF NOT EXISTS PARTITION(sale_date='202112',region='hangzhou')...

使用NAS动态存储

在NAS文件系统中通过创建子目录并将其映射为一个动态PV提供给应用。本文介绍如何使用NAS动态存储卷。前提条件 已创建Kubernetes集群,并且在该集群中安装Flexvolume插件。具体操作,请参见 创建Kubernetes托管版集群。已部署alicloud-nas-...

实例

开通 表格存储 服务后,您需要通过 表格存储 管理控制台来创建实例,然后在实例内进行表的创建和管理。每个阿里云账号最多创建10个实例,每个实例内最多创建64张表(包括数据表、二级索引表和时序表)。如果您需要增加限额,请 提交工单。...

NAS存储卷概述(ASK)

在 ACK Serverless集群 中,只支持挂载NAS静态存储卷,不支持挂载NAS动态存储卷。关于如何挂载NAS静态存储卷,请参见 使用NAS静态存储卷。注意事项 NAS为共享存储,可以同时为多个Pod提供共享存储服务,即一个PVC可以同时被多个Pod使用。在...

RDS迁移至MaxCompute实现动态分区

执行动态分区SQL,按照临时表的字段dt自动分区,dt字段中相同的数据值,会按照这个数据值自动创建一个分区值。例如dt中有些数据是20181025,会自动在ODPS分区表中创建一个分区,dt=20181025。动态分区SQL如下。可以注意到SQL中select的字段...

概述

为此,PolarDB-X 2.0的AUTO模式数据库分区表配套了非常完善的分区变更及管理能力,具体的分区管理能力包括以下几种:分裂分区 分裂热点 合并分区 迁移分区 重命名分区 增加分区 删除分区 修改分区 重组分区 清空分区 分区变更操作对不同...

BigQuery数据迁移至MaxCompute

可选:如果您未创建存储分区,请登录 OSS管理控制台,创建保存迁移数据的分区(Bucket),详情请参见 控制台创建存储空间。可选:如果您未创建RAM用户,请创建RAM用户并授予相关权限。登录 RAM访问控制台,创建RAM用户,详情请参见 创建RAM...

NAS存储卷FAQ

使用NAS存储卷时,提示chown:Operation not permitted 使用NAS动态存储卷时,Controller的任务队列已满且无法创建新的PV NAS存储卷挂载时间延长 使用NAS存储卷时,无法创建或修改目录 当工作负载挂载NAS存储卷时,提示unknown filesystem ...

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 管理文件访问权限 管理文件元数据 转换文件存储类型 列举文件 查询文件 删除文件 拷贝文件 解冻归档文件 管理软链接

常见问题

存储管理 什么是OSS生命周期管理?如何利用生命周期管理来帮助降低OSS存储成本?生命周期规则可以定期将非热门数据转换为低频访问、归档、冷归档或者深度冷归档存储,将不再需要访问的数据删除,让您更高效地管理您存储的数据,节省大量...

推荐的挂载方式

容器网络文件系统CNFS则是阿里云容器服务利用CSI插件抽象出的新的容器存储管理方式,与传统CSI使用模式保持兼容。我们推荐您在使用阿里云容器服务时使用CNFS来管理和访问NAS存储卷,从而获得明显的性能提升和强大的管理能力和I/O可观测性。...

分区

部分对分区操作的SQL的运行效率较低,会给您带来较高的费用,例如 插入或覆写动态分区数据(DYNAMIC PARTITION)。对于部分操作MaxCompute的命令,处理分区表和非分区表时语法有差别,详情请参见 表操作 和 INSERT操作。使用限制 单表分区...

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 管理文件访问权限 管理文件元数据 转换文件存储类型 列举文件 拷贝文件 禁止覆盖同名文件 解冻文件 单链接限速 对象标签 删除文件 解冻...

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object)。包括以下操作:判断文件是否存在 管理文件元信息 列举文件 拷贝文件 重命名文件 禁止覆盖同名文件 删除文件 转换文件存储类型 单链接限速 解冻文件 对象标签 管理软链接

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 管理文件访问权限 管理文件元数据 列举文件 删除文件 拷贝文件 解冻归档文件 管理软链接 开启MD5验证

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:管理文件访问权限 管理文件元信息 列举文件 删除文件 拷贝文件

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 获取文件元数据 列举文件 拷贝文件 删除文件

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:管理文件访问权限 管理文件元数据 列举文件 拷贝文件 删除文件 解冻归档文件 管理软链接

功能特性

OSS支持以下功能特性:场景分类 应用场景 场景说明 参考文档 存储空间管理 创建存储空间 在上传文件(Object)到OSS之前,您需要创建一个用于存储文件的存储空间(Bucket)。存储空间具有各种配置属性,包括地域、访问权限、存储类型等。您...

管理文件概述

您可以通过一系列的接口管理存储空间(Bucket)下的文件(Object),包括以下操作:判断文件是否存在 获取文件元数据 列举文件 拷贝文件 删除文件
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
文件存储 CPFS 对象存储 云存储网关 商标服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用