使用函数计算清洗数据

将数据写入到表格存储时,您可以通过函数计算对新增的数据做简单的清洗,将清洗后的数据写回到表格存储的另一种数据表中。同时,您也可以实时访问表格存储中的原始数据和结果数据。样例场景 假设写入表格存储的为日志数据,且日志数据包括...

SDK示例

本文列出了使用Java代码通过Hadoop FileSystem API对 文件存储 HDFS 版 文件系统进行常用操作的示例,您可以参考这些示例代码开发您的应用。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储...

文件存储HDFS版

文件存储HDFS版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。您可以像在Hadoop分布式文件系统(Hadoop Distributed File System)中管理和访问数据那样使用文件存储HDFS版。您无需对现有大...

CDH6数据迁移

本文介绍如何将CDH中本地HDFS的数据迁移到 文件存储 HDFS 版,实现存储计算分离。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已在阿里云上创建ECS实例并安装CDH6集群。...

阿里云文件存储NAS挂载使用

重要 创建VMware虚拟机时,如果选择阿里云文件存储NAS提供的数据存储,虚拟机磁盘格式虽然为精简置备,但实际为厚置备格式,请注意数据存储的空间使用情况。前提条件 创建阿里云文件存储NAS文件系统,详细内容请参考 创建文件系统。开工单...

CPFS并行文件存储

CPFS并行文件存储 提供高性能计算文件存储,支持标准的POSIX和MPI-IO协议,自带的高性能计算程序无需任何接口适配和性能优化即可高效执行,满足高性能文件存储需求。产品架构 CPFS并行文件存储 是针对高性能和超大规模存储场景推出的文件...

创建文件系统实例后,为什么无法访问文件存储 HDFS 版...

本文介绍了在创建文件系统实例后无法访问 文件存储 HDFS 版 的排查方法。您可以请根据以下几种情况进行排查:确认访问 文件存储 HDFS 版 服务的ECS实例对应的专有网络及虚拟交换机ID,与挂载点的专有网络及虚拟交换机ID是否一致。确认挂载...

生命周期管理概述

费用说明 当您通过生命周期策略将存储在通用型NAS文件系统标准存储中的冷数据转存至低频存储或归档存储后,NAS会根据您文件存储的类型、大小和时长收取一定的存储费用及读写访问数据的流量费用。详细信息,请参见 通用型NAS计费。低频存储...

文件存储

本文为您介绍 PolarDB PostgreSQL版(兼容Oracle)的文件存储。主节点和只读节点的数据和WAL日志保存在共享存储中。配置文件、Log文件和临时文件在每个节点都会单独保存。主节点的CLOG文件存储在共享存储中;只读节点的CLOG文件会在各自...

配置CDH6使用文件存储 HDFS 版

数据迁移完成后,您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务,才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令,将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...

计费案例

本文以案例形式介绍文件存储CPFS费用的计算方法。说明 以下计费示例仅供参考,实际价格以您CPFS购买页面为准。案例一:存储容量 王先生在华东1(杭州)创建了一个规格为200 MB/s/TiB基线的CPFS文件系统,假设在2021年10月份期间每小时的...

高级管理FAQ

删除策略之前,如果数据已经转储到低频存储或归档存储,数据仍会继续保存在低频存储或归档存储中,并将按照低频存储或归档存储的费用收取存储费用。如果您是想将存储至低频存储或归档存储中的数据取回通用型NAS存储空间,请参见 创建数据...

配置E-MapReduce服务使用文件存储 HDFS 版

本文介绍如何配置E-MapReduce上的HDFS服务、HIVE服务、SPARK服务、HBase服务来使用 文件存储 HDFS 版。前提条件 已完成数据迁移。具体操作,请参见 E-MapReduce数据迁移。配置HDFS服务 登录 阿里云E-MapReduce控制台。在 集群管理 页面,...

功能特性

删除DBFS 删除数据库文件存储并停止计费 删除DBFS 修改DBFS实例规格 在使用数据库文件存储的过程中根据业务存储性能的要求,调整数据库文件存储的实例规格,实例规格越高,消耗的CPU和内存资源越多 实例规格说明 修改DBFS使用场景 在使用...

OSS有哪些批量操作?

批量修改文件存储类型 您可以使用以下方法,批量修改文件的存储类型:ossutil工具 使用ossutil的 set-meta 命令,结合-r(-recursive)选项,批量修改指定文件的存储类型。详情请参见 set-meta(管理文件元数据)。生命周期规则 通过生命...

logging(日志转存)

prefix 日志文件存储的目录。如果指定此项,则日志文件将保存在目标Bucket的指定目录下。如果不指定此项,则日志文件将保存在目标Bucket的根目录下。重要 生成日志的源Bucket和存储日志的目标Bucket可以相同也可以不同,但是必须位于同一...

变量

变量 说明 示例值 bucket 原始文件存储空间(Bucket)名称。test-bucket key 原始文件保存在存储空间中的资源名。重要 使用该变量时请避免将输出文件和输入文件设置为相同文件,否则会覆盖源文件或在批处理时循环触发。path1/path2/name....

设置生命周期策略

您可以基于最后一次访问时间的规则创建生命周期策略,定期将通用型NAS文件系统内的多个文件或目录转储为指定的存储类型,从而节省存储费用。费用说明 低频存储类型费用说明 低频存储容量费用:根据您转储至低频存储中的文件大小、时长收取...

什么是文件存储 HDFS 版

文件存储 HDFS 版(Apsara File Storage for HDFS)是面向阿里云ECS实例及容器服务等计算资源的文件存储服务。产品概述 文件存储 HDFS 版 允许您就像在Hadoop分布式文件系统(Hadoop Distributed File System)中一样管理和访问数据。您...

计费常见问题

本文列举 文件存储 HDFS 版 的计费常见问题。计费 开通文件存储 HDFS 版服务后,就开始计费吗?文件存储 HDFS 版服务如何停止计费?删除存储数据后,为什么控制台显示的存储容量不变,账单没有减少?使用文件系统上传下载数据时,是否计费...

媒体处理概述

工作原理 离线转码:将视频文件上传到OSS存储空间,创建媒体处理任务,任务执行成功后,转码后的文件存储在OSS中。边转边播:将视频文件上传到OSS存储空间,创建边转边播播放列表,立即播放,对视频实时按需转码并存储在OSS中。处理参数 ...

一般性问题

1.数据库文件存储DBFS是什么,适合什么场景?数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于:OLTP及OLAP数据库场景:例如,MySQL、PostgreSQL等。NoSQL数据库场景:例如,MongoDB、RocksDB等。2...

管控外设

如果终端用户使用云电脑时需要访问本地设备磁盘上的文件或数据,或者需要使用本地设备连接的外设,此时您需要优先在控制台开启相关配置项,终端用户才可在云电脑上顺利访问本地设备的磁盘,或者使用本地设备连接的打印机或摄像头等外设。...

文件存储 HDFS 版上使用Apache HBase

本文主要介绍在 文件存储 HDFS 版 上使用Apache HBase的方法。前提条件 已开通 文件存储 HDFS 版 服务并创建文件系统实例和挂载点。具体操作,请参见 文件存储HDFS版快速入门。已为Hadoop集群所有节点安装JDK,且JDK版本不低于1.8。已部署...

为什么云存储网关与OSS上的文件不一致

存储网关上的文件与OSS对象一一对应,提供与OSS对象1:1映射的文件共享服务,您可以通过网关以标准的POSIX接口访问OSS上的资源。云存储网关与OSS是相互独立的云产品,为保证您通过网关看到的文件视图与OSS一致,需要有特殊的元数据同步...

集成概览

调用方式 调用方式 支持情况 备注 阿里云SDK(推荐)支持 数据库文件存储DBFS支持的语言及依赖安装方法,请参见 数据库文件存储 SDK。阿里云SDK集成方式说明请参见 阿里云 SDK。Terraform 支持 如何使用Terraform自动化创建和管理资源,请...

存储空间清单

您可以选择导出标准存储、低频访问存储、归档存储以及冷归档存储的文件。对象版本 选择清单扫描的文件版本。如果Bucket已开启版本控制,可选择导出目标文件的 当前版本 或 所有版本。更多信息,请参见 版本控制概述。如果Bucket未开启版本...

集成概览

调用方式 调用方式 支持情况 备注 阿里云SDK(推荐)支持 文件存储NAS支持的语言及依赖安装方法,请参见 文件存储(NAS/CPFS)SDK。阿里云SDK集成方式说明请参见 阿里云 SDK。阿里云CLI 支持 阿里云CLI调用方式说明请参见 阿里云 CLI。资源...

如何存储函数程序产生的较大文件

如果需要在磁盘中存储较大文件,例如,超过500 MB的文件,您可以按照以下方式处理:直接在 函数计算控制台,将函数的 临时磁盘空间 设置为10 GB。具体操作,请参见 管理函数。使用 文件存储 NAS。函数计算 为您提供临时文件存储目录/tmp,...

如何存储函数程序产生的较大文件

如果需要在磁盘中存储较大文件,例如,超过500 MB的文件,您可以按照以下方式处理:使用性能实例,当前性能实例磁盘空间为10 GB。更多信息,请参见 实例类型及使用模式。使用文件存储NAS。函数计算 为您提供临时文件存储目录/tmp,您还可以...

申请与创建

使用场景 使用数据库文件存储的应用场景。性能等级 容量越大,可供选择的性能级别越高(460 GB 以上可选 PL2,1260 GB 以上可选 PL3),性能级别越高相应的费用也越高。存储加密 开启存储加密能够最大限度保护您的数据安全,您的业务和应用...

存储资源

存储资源是指用于存储和管理数据的硬件和软件资源,包括节点的本地磁盘、分布式文件存储、数据库和缓存等。存储资源的主要作用是存储和管理系统的数据。存储资源需要提供数据的持久性、可靠性和高效性,以满足系统的数据存储和访问需求。...

什么是文件存储NAS

阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。产品概述 NAS基于POSIX文件接口,天然适配原生操作系统...

集成概览

调用方式 调用方式 支持情况 备注 阿里云SDK(推荐)支持 文件存储NAS支持的语言及依赖安装方法,请参见 文件存储(NAS/CPFS)SDK。阿里云SDK集成方式说明请参见 阿里云 SDK。阿里云CLI 支持 阿里云CLI调用方式说明请参见 阿里云 CLI。资源...

为什么文件系统容量和快照大小不一致

如果您在ECS实例内删除文件后再创建快照,发现快照容量并没有变小,或者快照比从文件系统查询到的磁盘占用空间大,本文针对该问题...Linux系统格式化:格式化磁盘后,在实例没有写入业务数据前,第一份快照的容量大小与磁盘文件系统格式有关。

入门概述

文件存储NAS概述 阿里云文件存储NAS(Apsara File Storage NAS)是面向阿里云ECS实例、E-HPC、容器服务等计算节点的文件存储服务。它是一种可共享访问、弹性扩展、高可靠以及高性能的分布式文件系统。NAS兼容了POSIX文件接口,可支持数千台...

监控与日志

监控与日志可有效保障您文件存储NAS资源的可用性、业务的正常运行和健康度。您可通过对应的监控能力,持续收集监控数据。阿里云提供了各种监控与日志审计相关的服务,例如云监控、配置审计等,帮助您实时监控云资源的使用情况和业务运行...

概述

文件存储HDFS版 文件存储HDFS版(Apsara File Storage for HDFS)是一款面向阿里云ECS实例及容器服务等计算资源的文件存储服务,满足以Hadoop为代表的分布式计算业务类型对分布式存储性能、容量和可靠性的多方面要求。表格存储 表格存储...

key_mgmt_tool

exportPrivateKey 将私钥从加密机实例导出到磁盘文件。exportPubKey 将公钥从加密机实例导出到磁盘文件。exSymKey 将对称密钥的明文从加密机实例导出到文件。extractMaskedObject 从HSM实例中提取密钥作为屏蔽对象文件。findKey 通过关键...

【公告】数据库文件存储按量付费价格下调

您可以在 用户中心 查看后付费(按量计费)数据库文件存储的账单信息,调整后的价格会体现在账单金额上。下调后的价格何时生效?我是否需要进行操作?下调后的价格,自本次系统发布时正式生效;无需您手动操作,会自动体现在后付费账单金额...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库文件存储 文件存储HDFS版 文件存储 CPFS 对象存储 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用