CopyObject
在非版本控制的Bucket中使用CopyObject 且源Object与目标Object为同一个Object时：拷贝过程中不涉及修改源Object的加密类型或者存储类型，则OSS只修改源Object的元数据，不拷贝源Object的内容。拷贝过程中涉及修改源Object的加密类型或者...
DBMS_PROFILER
表 1.DBMS_PROFILER函数/存储过程 函数/存储过程 类型 返回类型 描述 FLUSH_DATA 函数、存储过程 Status code、exception 刷新当前会话中收集的性能数据。GET_VERSION(major OUT,minor OUT)存储过程 N/A 返回 DBMS_PROFILER 版本信息。...
列存表MetaScan加速查询性能
列存表是通过block为单位来存储数据的，MetaScan是通过meta信息判断block是否满足条件，跳过不满足条件的block，从而减少I/O，提升扫描性能的。如果过滤列的数值分布的非常散，例如每个block都有，这样的话，即使过滤率很好也需要扫描所有...
创建同城冗余存储Bucket
整个故障切换过程用户无感知、业务不中断、数据不丢失，满足关键业务系统对于恢复时间目标（RTO）以及恢复点目标（RPO）等于0的强需求。注意事项 华东1（杭州）、华东2（上海）、华北2（北京）、华北 3（张家口）、华北6（乌兰察布）、华南...
存储空间概述
✓ 仅支持删除，不支持存储类型转换 基于最后一次访问时间的生命周期规则 您可以通过基于最后一次访问时间（Last Access Time）策略的生命周期规则来自动监测数据的访问模式并识别冷数据，然后将识别出来的冷数据进行存储类型的转换，从而...
判断存储空间是否存在
本文介绍如何判断存储空间是否存在。注意事项 本文以华东1（杭州）外网Endpoint为例。如果您希望通过与OSS同地域的其他阿里云产品访问OSS，请使用内网Endpoint。关于OSS支持的Region与Endpoint的对应关系，请参见 访问域名和数据中心。本文...
更改列存表的数据存储格式
从Hologres V0.10版本开始，Hologres创建的列存表数据存储格式升级为AliORC，该存储格式能够进一步压缩数据存储大小，降低存储成本。本文将会为您介绍在Hologres中如何更改列存表的数据存储格式。使用限制 在Hologres中更改列存表的数据...
实时存储引擎
老版本的 AnalyticDB MySQL版 实时存储引擎采用RowGroup行列混存的方式，在列存的基础上以行数对齐的方式使得一个组内逻辑行号对齐。这样的设计在宽表场景下存在弊端：当访问一行数据时，磁盘的I/O单位变得不可控。当前版本的 AnalyticDB ...
列存索引常见问题
使用 dbms_imci.columnar_advise()存储过程可以获得某个SQL语句所需的DDL语句，按照这个DDL语句构建列存索引，可以保证该SQL语句完全被列存索引覆盖。更多信息请参见 获取创建列存索引的DDL语句。dbms_imci.columnar_advise('...
数据归档
云盘版本的RDS PostgreSQL实例数据表文件都存储在云盘（ESSD）中，在数据量较大时，可能会面临较高的存储成本。通常，RDS PostgreSQL实例的数据包含冷数据和热数据。通过数据归档功能，可以将对象存储（OSS）用作归档冷数据的存储介质，...
计费常见问题
说明 存储包绑定文件系统后，不支持手动解绑，只有绑定存储包的通用型NAS文件系统实例被删除或存储包到期后，存储包才会自动解绑。更多信息，请参见 存储包（不支持新购）。为什么转储为低频存储后，文件存储成本最多可以降低92%？以中国...
使用aliyun-codec插件
以下示例表示对倒排（postings）文件不开启压缩，对行存（source）和列存（docvalue）文件使用zstd算法进行压缩。说明 如果您要关闭某类文件的压缩，可将对应参数配置为""，例如以下示例代码中的"index.postings.compression":"。PUT test/...
数据归档
在选择存储类型时，选择 通用云盘，页面会自动显示三层存储（缓存、数据、冷存）的 配置 栏，可在 冷存 配置项中打开 数据归档 功能的开关。实例详情页 访问 RDS实例列表，在上方选择地域，然后单击目标实例ID（该实例符合数据归档OSS功能...
判断存储空间是否存在
本文介绍如何判断存储空间是否存在。示例代码 以下代码用于判断指定的存储空间是否存在。const OSS=require('ali-oss')const client=new OSS({/yourregion填写Bucket所在地域。以华东1（杭州）为例，Region填写为oss-cn-hangzhou。region:'...
如何统计冷存数据
场景描述 表、索引转存至冷存过程中会进行压缩，所以存储在冷存中的数据相比在云盘上的存储空间也会减少，其统计的规则也会发生变化，PolarDB PostgreSQL版 提供了冷存数据存储空间统计函数，用户可以通过统计函数了解数据的使用情况。...
概述
为应对数据爆炸式增长的挑战，PolarDB分布式版本基于对象存储设计了一套列存索引（Clustered Columnar Index，CCI）功能，支持将行存数据实时同步到列存存储上，并支持以下功能：在线事务处理和实时数据分析的一体化能力，满足OLTP和OLAP...
如何统计冷存数据
场景描述 表、索引转存至冷存过程中会进行压缩，所以存储在冷存中的数据相比在云盘上的存储空间也会减少，其统计的规则也会发生变化，PolarDB PostgreSQL版（兼容Oracle）提供了冷存数据存储空间统计函数，用户可以通过统计函数了解数据的...
PolarDB MySQL版8.0.1版本发布日志
2023-11-07 8.0.1.1.38 类别 说明 发布时间 新增功能和性能优化 支持用户使用内置存储过程 dbms_oss.delete_table_flie 删除OSS上不使用的文件。优化了库表恢复功能。如提升库表恢复速度，支持任务失败回滚等。2023-10-31 问题修复 修复因...
设置列索引的排序键
列存索引数据排序与DDL排序的区别 列存索引数据排序的本质是按照指定键组合进行排序，类似于其他普通二级索引DDL排序过程，但两者也有不同之处，具体区别如下：列存索引排序不使用索引列作为排序键，而是可以指定任意组合的排序键。列存...
基础问题
PDS重复文件只存一份，所以存储费用中只按照客户实际物理空间核算，不按照客户给用户超额分配的逻辑空间核算。云盘（空间）和文件夹区别？文件夹必须在一个云盘（空间）下，空间相比文件夹是一个更大颗粒的管理对象，可设置大小Quota、空间...
表存储格式：列存、行存、行列共存
Hologres支持三种表存储格式，分别为：行存、列存和行列共存，不同的存储格式适用于不同的查询场景，您需要根据表的使用场景设置表的存储格式，合适的存储格式可以显著提高数据处理和查询速度，同时也可以节省存储空间。设置存储格式语法 ...
产品架构
EMR Serverless StarRocks架构 EMR Serverless StarRocks的产品架构主要由以下三个层次构成：存储层：存算一体版：StarRocks内表使用云盘或本地盘作为数据存储的介质，使用StarRocks Table Format存储格式。存算分离版：StarRocks内表使用...
使用多机MPP对海量数据分析提速
判断某条SQL语句是否会通过列存索引的多机并行能力执行 当判断出某条SQL语句可以使用列存索引的并行执行能力后，您可以通过查看某条SQL语句的执行计划来查看是否会使用列存索引的多机并行能力。若执行计划中有 Exchange算子，则表示该SQL...
存储管理
管理员可通过存储管理功能，查看审计会话数据的存储空间的使用情况，以及对存储时长进行配置。本文介绍如何使用存储管理功能。背景信息 存储空间全部存满后，堡垒机会删除最早的审计会话数据。建议您根据业务需求，为审计会话数据设置合理...
INSERT
行列共存表：会分别Flush为行存和列存两种文件，SST和ORC格式，在Flush过程中会保证数据的一致性，只有行存、列存都同时Flush完成才会返回成功，同时在存储上行列共存相当于是两份存储，因此行列共存的表在存储上会有一定的牺牲。...
存储容量单位包SCU概述
存储容量单位包SCU（Storage Capacity Unit）是一种预付费存储售卖形态，可同时用来抵扣多款云存储产品的按量付费账单。相比于单一产品的存储包，存储容量单位包可以与多种云产品搭配使用，兼具性价比与资源使用的灵活性。适用场景 SCU能...
存储空间占用情况
OSS-HDFS服务使用OSS Bucket存储HDFS数据及其辅助数据，这些数据均存储于Bucket中的.dlsdata/路径下，并产生相应的OSS存储容量的计量和计费。OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bucket的存储空间。OSS-HDFS...
CDH6数据迁移
为了保证在更换文件存储系统的过程中文件数据不丢失，需要暂停数据处理服务（例如：YARN服务、Hive服务、Spark服务、HBase服务等），HDFS服务仍需保持运行。此处以停止Hive服务为例进行说明。在CDH Web主页，找到Hive服务，在右侧的操作...
原生存证接口
为方便存证场景的开发，合约平台提供原生存证交易接口以实现存证目的。存证内容上链 depositData 发起存证内容上链的交易，同步方式调用。函数原型 public DepositDataResponse depositData(DepositDataRequest request)请求参数 参数 必选...
原生存证接口
为方便存证场景的开发，合约平台提供原生存证交易接口以实现存证目的。存证内容上链 depositData 发起存证内容上链的交易，同步方式调用。函数原型 public DepositDataResponse depositData(DepositDataRequest request)请求参数 参数 必选...
存储压缩
在存储层，AnalyticDB PostgreSQL版本支持行存、Append-only行存和Append-only列存三种存储格式。其中，列存表支持在建表时指定压缩算法、对数据进行压缩。存储压缩可以有效帮助用户减少存储成本和I/O资源的消耗。使用方法 在创建Append-...
产品架构
存储 云数据库SelectDB版 存储，支持存算分离架构，多计算集群共享存储数据从而减少副本数，并且使用对象存储（OSS），可以大幅降低存储成本。云数据库SelectDB版 存储用于存放全量数据，支持通过Stage分段批量导入数据、通过S3协议导入...
存算分离模式下借助本地缓存提升查询性能
在StarRocks的存算分离模式下，Query执行引擎会在查询执行过程中记录访问缓存和对象存储OSS的指标，并将其记录在Profile中。因此，我们可以使用Profile工具来查看相关指标。最大Query超时时间。set global query_timeout=1200;查询catalog_...
创建投递任务
Format：投递的数据的存储以Parquet列存格式存储，数据湖投递默认使用PLAIN编码方式，PLAIN编码方式支持任意类型数据。EventTimeColumn：事件时间列，用于指定按某一列数据的时间进行分区。如果不设置此参数，则按数据写入表格存储的时间...
数据分层存储
低频访问存储即全HDD冷存，满足低频访问数据的低成本存储需求，适用于对延迟不敏感或不常访问的超大型数据集，文中简称为冷存。对于主从实例，建议升级到V1.3.55及以上版本开启冷存。同时也支持表级别的冷热数据分层，可以使用Hologres提供...
使用Explain分析SQL执行计划
判断方法 列存索引只能访问被列存索引覆盖到的数据列的数据，因此，当您需要查询的列都被列存索引覆盖时，便可以使用列存索引加速功能。说明 如何判断您需要查询的列是否被列存索引覆盖，请参考 检查SQL语句中的表是否已创建列索引。...
判断存储空间是否存在
示例代码 以下代码用于判断存储空间examplebucket是否存在：require 'aliyun/oss' client=Aliyun:OSS:Client.new(#Endpoint以华东1（杭州）为例，其它Region请按实际情况填写。endpoint:'https://oss-cn-hangzhou.aliyuncs.com',#从环境...
PolarDB MySQL版8.0.2版本发布日志
修复部分内置存储过程输入变量数量错误，不能正确报错的问题。修复并行查询将GROUP BY下推到Worker上去并行执行时，在有分区表的情况下，返回结果集中存在分组重复的问题。修复创建包含DECIMAL类型的列的表时，误报“Row size too large....
存储引擎
AnalyticDB PostgreSQL版 存储引擎基于PostgreSQL实现，在继承了PostgreSQL存储引擎可扩展、高可用、强事务能力的基础同时，还具备如下特性：多种表类型：存储引擎同时支持行存表和列存表，行存表适用于高频数据增删改和点查场景，列存表...
产品计费
其他费用 在使用云存储网关过程中，除了云存储网关收费的计费项之外，还有其他费用支出。OSS使用费用 云存储网关中的OSS资源归您所有，网关访问OSS产生的费用由OSS产品向您收取，这些费用包括存储费用、流量费用、请求费用和数据取回费用，...
- 产品推荐
- 这些文档可能帮助您