创建自动快照策略
本文描述了如何在数据库文件存储控制台创建一份自动快照策略。前提条件 您已经开通了云盘快照服务。具体操作，请参见 开通快照。操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 快照，然后单击 ...
存储格式与SerDe
DLA内置了处理各类数据文件的Serialize/Deserilize（简称SerDe，用于序列化和反序列化），您无需编写程序，直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe，DLA可以对OSS上的多种格式的文件进行查询分析，包括纯文本文件...
CDH6数据迁移
为了保证在更换文件存储系统的过程中文件数据不丢失，需要暂停数据处理服务（例如：YARN服务、Hive服务、Spark服务、HBase服务等），HDFS服务仍需保持运行。此处以停止Hive服务为例进行说明。在CDH Web主页，找到Hive服务，在右侧的操作...
数据导出到OSS概述
预留模式：计费项包括计算能力、数据存储量和外网下行流量，其中数据存储量包括高性能存储、容量型存储和多元索引存储。读取表格存储数据时会消耗计算资源，计算资源的计费涵盖在计算能力费用中。按量模式：计费项包括读吞吐量、写吞吐量、...
文件存储HDFS版
将Hadoop或其他机器学习应用部署在多个计算资源上，应用可以直接通过Hadoopfs接口访问数据进行离线或在线计算，也可以直接将计算结果输出到文件存储HDFS版做永久保存。性能 衡量文件存储HDFS版的性能指标主要是吞吐能力。吞吐最大不会超过...
删除自动快照策略
操作步骤 登录 数据库文件存储控制台。在顶部菜单栏左上角处，选择地域。在左侧导航栏，选择 快照，然后单击 自动快照策略 页签。在 自动快照策略 页面，找到需要删除的策略，在 操作 列单击 删除。在提示对话框中单击按钮“我已知晓风险，...
基本概念
术语 描述 文件系统实例 一个拥有全局命名空间，可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名，您需要修改 ...
设置或取消自动快照策略
您可以对数据库文件系统设置自动快照策略。设置自动快照策略后，阿里云会自动按照预设的时间点和周期为文件系统创建快照。前提条件 您已经创建了至少一份自动快照策略。具体操作，详见 创建自动快照策略。计费说明 数据库文件系统快照功能...
数据量
存储数据量 存放存储介质的实际数据大小，与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小：数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（内置存储）。
【公告】数据库文件存储计费方式调整
尊敬的阿里云用户，阿里云将于2023年05月04日起调整数据库文件存储计费方式。调整时间 2023年05月04日18:00:00。调整地域 华东1（杭州）、华东2（上海）、华北2（北京）、华南1（深圳）。调整内容 调整前 调整后 计费方式 按小时计费，不足...
查询低频/归档的文件信息
2021-02-11T10:08:10Z StorageType string 返回文件的数据存储类型。仅当 Type 为 File 时，返回该参数。包括：Standard：通用型 NAS 存储。InfrequentAccess：低频介质存储。InfrequentAccess Name string 文件名或目录名。file.txt ...
GetDbfs-查询单个数据库文件系统
调用GetDbfs查询数据库文件系统详细信息。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以自动生成SDK代码示例。调试 授权信息 下表是API对应的授权信息，可以在RAM权限策略语句...
什么是文件存储CPFS
低成本：支持与OSS数据进行高效率流动，降低数据存储成本。更多信息，请参见 数据流动概述。多协议互访：支持POSIX和NFS多协议互访，一份数据多种业务平台同时访问。更多信息，请参见 协议服务概述。数据隔离：统一命名空间下，NFS协议支持...
MySQL 5.7配置说明
本文主要为您说明在使用阿里云数据库文件存储DBFS服务时，MySQL数据库建议的配置。Server层参数 MySQL Server层的推荐参数配置如下：skip-log-bin：基于DBFS的共享存储实现主备高可用，可关闭binary log获取更好的性能。log-bin：MySQL ...
数据服务系统配置
当您修改时长小于之前设置的时长（例如：之前设置的是30天，现在修改变成20天），保存时需再次确认是否删除统计数据存储周期变小的时间段，如下图对话框中所示的时间区间。单次查询跨度小于等于：默认是31天，维度仅支持天，支持最大数值不...
创建及管理数据集
其中 选择数据存储 支持配置为 阿里云对象存储（OSS）、阿里云文件存储（通用型NAS）、阿里云文件存储（极速型NAS）、阿里云文件存储（CPFS）和 阿里云文件存储（智算CPFS），使用各个云产品创建数据集时的参数配置说明如下：阿里云对象...
UpdateDbfs-修改数据库文件系统
取值范围：dbfs.small dbfs.medium dbfs.large（默认值）dbfs.medium AdvancedFeatures string 否 可定制数据库文件存储实例使用的 CPU 核数、内存上限值等。{"cpuCoreCount":0.5,"memorySize":512,"pageCacheSize":128} 返回参数 名称 ...
数据归档
功能优势 开启RDS MySQL通用云盘的数据归档OSS功能后，借助OSS海量、安全、低成本、高可靠的特性，用户能够在RDS MySQL上实现极低成本的归档数据存储，在具备InnoDB事务能力之上支持低频的数据访问，数据存储成本相较于ESSD PL1云盘下降80%...
数据脱敏
脱敏源为 RDS表/PolarDB-X表/MaxCompute表/PolarDB表/OceanBase表/ADB-MySQL表 时配置项说明 脱敏源配置项 是否必填 配置描述 数据存储类型 是 选择脱敏文件的数据存储类型。支持的存储类型包括：RDS表、PolarDB-X表、MaxCompute表、...
什么是备份数据量
与备份数据量不同，存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下，数据库磁盘空间（RDS/ECS）>数据文件空间（实际使用）>备份数据量（DBS）>存储数据量（OSS）。综上所述，您可通过调整...
CreateDataFlow-创建数据流动
创建一个CPFS文件系统与源端存储的数据流动。接口说明 基础操作 文件存储 CPFS 2.2.0 及以上版本、智算 CPFS 2.4.0 及以上版本支持数据流动。文件存储 CPFS、CPFS 智算版状态为运行中，才能创建数据流动。一个文件存储 CPFS 或者 CPFS 智算...
导入数据
数据文件的保存路径有两种选择：您可以将文件直接归档至MaxCompute客户端的 bin 目录中，上传路径为 文件名.后缀名；也可以将文件归档至其他路径下，例如D盘的test文件夹，上传路径为 D:\test\文件名.后缀名。假设，本文中的示例数据文件 ...
文件存储 HDFS 版和数据库MySQL双向数据迁移
背景信息 Sqoop 是一款开源的工具，主要用于在Hadoop和结构化数据存储（例如关系数据库）之间高效传输批量数据。既可以将一个关系型数据库（MySQL、Oracle、Postgres等）中的数据导入 文件存储 HDFS 版 中，也可以将 文件存储 HDFS 版 的...
【新功能/规格】RDS通用云盘支持数据归档OSS功能
功能简介 RDS SQL Server基于SQL Server内核原生的数据库分离附加功能，并结合OSS对象存储，实现了对数据库文件的操作，以及在云盘和OSS之间进行数据文件传输。用户可以通过控制台一键将数据库转为冷存储，数据文件将从云盘存储迁移到OSS...
Tunnel操作
数据文件的保存路径有两种选择：您可以将文件直接下载至MaxCompute客户端的 bin 目录中，此时 path 需要设置为 文件名.后缀名；也可以将文件下载至其他路径下，例如D盘的test文件夹，path 需要设置为 D:\test\文件名.后缀名。使用示例 示例...
授权信息
本文为您介绍 数据库文件存储（DBFS）为RAM权限策略定义的操作（Action）、资源（Resource）和条件（Condition）。数据库文件存储（DBFS）的RAM代码（RamCode）为 dbfs，支持的授权粒度为 RESOURCE。权限策略通用结构 权限策略支持JSON格式...
CreateDbfs-创建数据库文件系统
取值范围：dbfs.small dbfs.medium dbfs.large（默认值）dbfs.small AdvancedFeatures string 否 可定制数据库文件存储实例使用的 CPU 核数、内存上限值等。cpuCoreCount：CPU 核数。memorySize：内存大小，单位 MB。pageCacheSize：...
MySQL存储计算分离实践
本文主要说明如何基于阿里云数据库文件存储DBFS搭建MySQL数据库。背景信息 云上自建数据库通常会选用云盘和ext4文件系统作为MySQL数据库的文件存储。而基于DBFS构建，不但简化了用户基于块存储架构的复杂度，而且面向数据库场景，提供了...
成本
存储分层能力 很多分析场景的数据具有一定的时效性，时间越近的数据访问频率越高、越远的数据访问频率越低。AnalyticDB PostgreSQL版 能够根据需求，自动地将部分时效性较低的数据进行归档、使用OSS等成本更低、访问速度较慢的存储介质替换...
冷热数据分层存储
为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...
数据容灾
这两种存储类型的各项对比指标详情如下：对比指标 标准存储类型 低频访问存储类型 数据设计持久性 99.9999999999%（12个9）99.9999999999%（12个9）服务可用性 99.995%无 服务设计可用性 无 99.995%对象最小计量大小 按照对象实际大小计算 ...
设置列索引的排序键
总体流程如下：按照主键索引遍历并将读取到的完整数据保存至数据文件，然后将排序列添加到排序缓存区，其中每个线程使用不同的数据文件，累积达到一定数据后再写入；不断遍历并插入到排序缓存区，当排序缓存区满时，在内存中根据排序键组合...
添加数据
空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加，支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储上存储了数据文件。背景信息 ...
数据存储
时序数据存储 时序数据库对时序数据的写入、聚合以及检索都做了特定优化，AnalyticDB采集到的时序数据主要存在时序数据库中。目前每个AnalyticDB实例有一个独立的时序数据库进行服务，只保存当前AnalyticDB实例的时序数据。日志数据存储 ...
备份策略设置
您可设置数据备份和Redo日志备份的备份策略，如数据自动备份的频率、数据备份文件保存时长、存储位置以及日志备份文件保存时长等。操作步骤 登录 PolarDB控制台。在控制台左上角，选择集群所在地域。找到目标集群，单击集群ID。在左侧导航...
如何选用NAS、OSS和EBS？
数GB/s 容量 GiB~PiB 无限制 GiB~TiB 文件级别的授权 支持 支持 不支持 数据存储方式 目录树的组织形式 扁平的文件组织形式 需拆分数据到任意划分且大小相同的卷中 协议 NFS和SMB协议 HTTP/HTTPS协议 标准虚拟块设备协议接口或NVMe协议接口...
产品优势
低成本 DBS使用飞天分布式存储作为内置存储，备份数据会转换成专用格式，并经过压缩保存到内置存储，降低存储成本。支持按量付费，避免一次性投入大量资产；同时DBS支持存储分级，自动将备份数据存放到不同性价比存储介质中，适用于长期...
使用示例
本文主要介绍如何使用阿里云数据库文件存储服务DBFS。权限要求 读操作：root用户、普通用户均支持读操作。写操作：仅root用户支持进行写操作。场景示例 以下代码示例展示了在DBFS中创建文件、删除文件等基础操作。[root@iZbp156ycm6s06xj*]...
创建OSS外部表
MaxCompute支持您在项目中创建OSS（Object Storage Service）外部表，与存储服务OSS上的目录建立映射关系，您可以通过OSS外部表访问OSS目录下的数据文件中的非结构化数据，或将MaxCompute项目中的数据写入OSS目录。本文为您介绍创建OSS外部...
概述
文件存储CPFS 文件存储CPFS（Cloud Paralleled File System）是一款并行文件系统，其数据存储在集群中的多个数据节点，多个客户端可以同时访问，满足大型高性能计算机集群的高IOPS、高吞吐、低时延的数据存储需求。文件存储HDFS版 文件存储...
- 产品推荐
- 这些文档可能帮助您