应用场景

文件存储 HDFS 版 适用于对吞吐要求较高的大数据分析与机器...将Hadoop或其他机器学习应用部署在多个计算资源上,这样应用可以直接通过HadoopFS接口访问数据进行离线或在线计算,也可以直接将计算结果输出到 文件存储 HDFS 版 做永久保存

Tunnel命令

当您需要在本地环境与MaxCompute之间传输大量的数据时,MaxCompute提供Tunnel功能支持上传下载数据,使用Tunnel命令可以实现批量或增量数据的高效上传、下载,以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...

Tunnel命令

当您需要在本地环境与MaxCompute之间传输大量的数据时,MaxCompute提供Tunnel功能支持上传下载数据,使用Tunnel命令可以实现批量或增量数据的高效上传、下载,以提高数据传输效率和可靠性。本文为您介绍Tunnel上传下载命令的详细说明。...

存储格式与SerDe

DLA内置了处理各类数据文件的Serialize/Deserilize(简称SerDe,用于序列化和反序列化),您无需编写程序,直接选用一款或多款SerDe来匹配OSS上的数据文件格式。通过SerDe,DLA可以对OSS上的多种格式的文件进行查询分析,包括纯文本文件...

创建自动快照策略

本文描述了如何在数据文件存储控制台创建一份自动快照策略。前提条件 您已经开通了云盘快照服务。具体操作,请参见 开通快照。操作步骤 登录 数据文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,选择 快照,然后单击 ...

功能特性

无缝集成 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(HDFS)中一样管理和访问数据文件存储 HDFS 版 SDK可在所有Apache Hadoop 2.x环境中使用,包括阿里云EMR和阿里云Flink。文件存储 HDFS 版 支持的原生文件系统语义被开发人员...

什么是备份数据

与备份数据量不同,存储数据量取决于备份数据量、备份数据存储格式、压缩算法等因素。空间大小 在单次全量备份情况下,数据库磁盘空间(RDS/ECS)>数据文件空间(实际使用)>备份数据量(DBS)>存储数据量(OSS)。综上所述,您可通过调整...

删除自动快照策略

操作步骤 登录 数据文件存储控制台。在顶部菜单栏左上角处,选择地域。在左侧导航栏,选择 快照,然后单击 自动快照策略 页签。在 自动快照策略 页面,找到需要删除的策略,在 操作 列单击 删除。在提示对话框中单击按钮“我已知晓风险,...

基本概念

术语 描述 文件系统实例 一个拥有全局命名空间,可用来存储数据文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问目标地址。每个挂载点都对应一个域名,您需要修改 ...

系统配置

您可在数据保护伞的系统配置页面,设置数据保护伞的识别内容、识别范围,水印文件保存时间,是否展示风险识别的数据安全等级,以及告警信息的接收邮件及WebHook地址,以便及时发现并处理潜在安全风险。进入系统配置页面 进入数据开发页面。...

设置或取消自动快照策略

您可以对数据文件系统设置自动快照策略。设置自动快照策略后,阿里云会自动按照预设的时间点和周期为文件系统创建快照。前提条件 您已经创建了至少一份自动快照策略。具体操作,详见 创建自动快照策略。计费说明 数据文件系统快照功能...

冷热数据分层存储

为了降低数据存储成本、提高查询性能和系统资源利用率。云数据库ClickHouse 提供了冷热数据分层存储的功能。您可以根据查询频率将数据存储在不同类型的磁盘中。本文介绍如何开启冷热数据分层存储功能和设置分层存储策略。前提条件 云数据库...

计费项概览

按量付费+固定规格计算包 按量付费 包年包月 计算节点计费规则 存储空间 存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与集群所在的地域、预购的...

应用场景

本文介绍文件存储NAS数据存储的主要应用场景。企业应用上云 阿里云NAS提供标准的NFS和SMB接口,云下建立在NAS上的应用程序可以轻松迁移到阿里云。阿里云NAS基于云原生架构,具有99.95%高可用性,PB级容量弹性,同时支持目录配额、ACL、回收...

什么是数据库存储DBFS

数据文件存储(DBFS),是一款针对数据库场景的云原生共享文件存储服务。它基于共享存储架构设计,通过文件协议提供数据库定制功能,具备企业级存储特性。主要服务于云上自建数据库,基于传统SAN的应用等,为用户提供高IO性能和高可用性...

管理数据流动任务

删除(Evict)将释放CPFS上文件数据,删除后文件在CPFS上只保留元数据,您仍能看到该文件,但文件数据块已清除,不占用CPFS上的存储空间,访问该文件数据时,再从源端存储(例如OSS)按需加载。说明 删除前,请务必确认对应文件在OSS上...

功能特性

NAS具有丰富的功能特性,包括:容量弹性可扩展、共享访问、丰富的协议兼容、安全控制与合规、加密、灵活的访问模式、数据传输以及数据备份等...数据备份 文件存储备份可以通过灵活的备份策略生成多个备份副本数据,在发生数据损坏时进行恢复。

Tunnel操作

数据文件保存路径有两种选择:您可以将文件直接下载至MaxCompute客户端的 bin 目录中,此时 path 需要设置为 文件名.后缀名;也可以将文件下载至其他路径下,例如D盘的test文件夹,path 需要设置为 D:\test\文件名.后缀名。使用示例 示例...

导入数据

本文为您介绍如何通过MaxCompute客户端,使用Tunnel Upload将本地数据文件中的数据导入创建好的表中。前提条件 请确认您已满足如下条件:已创建表。更多创建表操作,请参见 创建表。已将CSV或TXT数据文件下载至本地。本文提供的数据文件样...

授权信息

本文为您介绍 数据文件存储(DBFS)为RAM权限策略定义的操作(Action)、资源(Resource)和条件(Condition)。数据文件存储(DBFS)的RAM代码(RamCode)为 dbfs,支持的授权粒度为 RESOURCE。权限策略通用结构 权限策略支持JSON格式...

迁移数据至阿里云NAS

配置数据传输中转节点后,您还要使用迁移工具迁移数据至阿里云文件存储NAS。本文介绍如何通过迁移工具将非阿里云的数据迁移至文件存储NAS。前提条件 已配置数据传输中转节点ECS实例。具体操作,请参见 配置数据传输中转节点。使用SFTP客户...

基于Delta lake的一站式数据湖构建与分析实战

数据湖作为一个集中化的数据存储仓库,支持的数据类型具有多样性,包括结构化、半结构化以及非结构化的数据,数据来源上包含数据库数据、binglog 增量数据、日志数据以及已有数仓上的存量数据等。数据湖能够将这些不同来源、不同格式的数据...

成本

存储分层能力 很多分析场景的数据具有一定的时效性,时间越近的数据访问频率越高、越远的数据访问频率越低。AnalyticDB PostgreSQL版 能够根据需求,自动地将部分时效性较低的数据进行归档、使用OSS等成本更低、访问速度较慢的存储介质替换...

导出全量数据到OSS

如果要以更低成本备份 表格存储 中的全量数据或者以文件形式导出 表格存储 数据到本地,您可以通过DataWorks数据集成服务将 表格存储 中的全量数据导出到OSS。全量数据导出到OSS后,您可以自由下载文件到本地。注意事项 此功能适用于 表格...

计费项概览

存储空间 存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与集群所在的地域、预购的存储空间大小、存储时长以及是否开启热备集群有关。按量付费+存储...

数据安全

数据备份与恢复 云原生多模数据库 Lindorm 宽表引擎支持数据备份恢复功能,该功能基于数据生态服务中的数据迁移,将数据存储至阿里云对象存储服务OSS(Object Storage Service,简称OSS)中,定期全量备份数据,实时增量同步数据,来满足对...

添加数据

空间数据提供对矢量、栅格、矢量瓦片、栅格瓦片、三维模型、倾斜摄影、BIM、点云等数据的添加,支持通过上传文件和对象存储两种通用的方式添加数据。本文主要介绍如何添加各类空间数据。前提条件 已在云存储存储数据文件。背景信息 ...

查询机制

UPDATE 上图中,txid表示事务号,t_xmin表示插入的事务号,t_xmax表示删除事务号,t_cid表示事务内命令的序号,t_tcid表示数据块内的偏移量,data表示实际数据存储的值。事务101 左侧SQL表示在tbl表中插入一行值为0的数据,右侧表示实际的...

术语

硬件压缩盘(Smart-SSD)Smart-SSD是存储物理硬盘层的一种高压缩技术,SSD硬盘内嵌专用FPGA/ASIC压缩计算芯片,在数据读写访问过程中由内嵌专用芯片实时对数据进行解压缩、压缩,大幅降低了数据存储成本。同时,面向 PolarDB 专用场景进行...

规格与定价(金融云)

数据备份(超出免费额度)计费规则 金融云 PolarDB 备份和恢复功能均免费使用,但备份文件需要占用一定的存储空间,PolarDB 会根据备份文件(包括数据和日志)的存储容量和保存时长收取一定费用。关于如何设置备份功能,详情请参见 备份...

术语

存储空间(Storage Capacity)存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。说明 购买 PolarDB 后,系统会自动创建数据库正常运行所需的相关文件并占用一定的存储空间,包括上述几种文件

使用示例

本文主要介绍如何使用阿里云数据文件存储服务DBFS。权限要求 读操作:root用户、普通用户均支持读操作。写操作:仅root用户支持进行写操作。场景示例 以下代码示例展示了在DBFS中创建文件、删除文件等基础操作。[root@iZbp156ycm6s06xj*]...

计费项概览

存储空间 存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与数据量大小和存储时长有关。按容量计费(按量付费)+存储包 按容量计费(按量付费)按...

计费项概览

存储空间 存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。被占用的存储空间会产生费用。存储空间的费用与数据量大小和存储时长有关。按容量计费(按量付费)+存储包 按容量计费(按量付费)按...

整体架构

对于其中部分操作,Storage Service会根据数据特征、时序等多个维度综合评估,自动执行数据优化任务,尽可能保持稳定高效的数据存储和计算状态。元数据管理 主要负责增量场景下 事务并发冲突管理、数据版本管理、Timetravel管理、元数据...

计费案例

为保障数据存储安全,王先生设置了跨区域复制,指定将数据同步至华东2(上海)地域的Bucket B内。Bucket A和Bucket B平均每天的请求数共计约20000次。王先生可根据情况选择以下付费方式。方式一:仅按量付费 通过该方式需支付总费用128.54...

术语

存储空间(Storage Capacity)存储空间是指数据文件、索引文件、日志文件(在线日志和归档日志)和临时文件等占用的空间。说明 购买 PolarDB 后,系统会自动创建数据库正常运行所需的相关文件并占用一定的存储空间,包括上述几种文件

备份策略

OceanBase 数据库支持对备份策略进行修改,您可以根据业务需求修改备份周期、备份时间、备份保留天数、是否开启归档备份、是否开启异地备份等参数。集群实例创建时会默认创建本地一级备份策略,同时开启日志备份。概念介绍 归档备份:对于...

将NAS数据迁移至本地

文件存储NAS支持通过rsync命令行工具、Robocopy工具等直接下载数据到本地文件。您也可以将数据同步到OSS后再在OSS侧下载数据到本地文件。重要 下载文件数据需要占用ECS公网带宽,建议您新购一台ECS实例专门负责文件数据下载,避免占用业务...

高压缩引擎(X-Engine)介绍

随着业务发展,数据库系统中会积累大量访问频率很低甚至为0的数据,这些数据的积累容易导致如下问题:历史数据和最新数据存储在同一数据库系统中,导致磁盘空间不足。大量数据共享数据库系统的内存、缓存空间、磁盘IOPS等,导致性能问题。...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 文件存储 CPFS 对象存储 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用