配置数据传输中转节点

使用新购ECS作为数据传输中转节点 上传下载文件数据需要占用ECS公网带宽,建议您新购一台ECS实例专门负责文件数据的上传下载,避免占用业务带宽。新购ECS挂载NAS文件系统有以下限制:镜像:仅支持ECS官方自营镜像配置自动挂载NAS。如果...

什么是文件存储CPFS

文件存储CPFS(Cloud Parallel File Storage)是阿里云推出的全托管、可扩展并行文件系统,满足高性能计算场景的需求。CPFS提供了统一的命名空间,支持成百上千的机器同时访问,拥有数十GB的吞吐、数百万的IOPS能力的同时还能保证亚毫秒级...

使用限制

本文介绍CPFS的文件系统限制、客户端限制、Fileset限制、数据流动限制、协议服务限制及容量监控限制。文件系统 限制项 阈值 说明 单个文件系统可创建的挂载点数量 1个 单个CPFS文件系统最多支持创建一个挂载点。单个客户端挂载文件系统个数...

联系我们

如果您有任何需求、反馈或者期望工程师即时沟通,欢迎联系我们。您可以通过如下方式联系我们:加入官方钉钉群:44854217(【官方】阿里云文档智能客户交流群)

查看NAS性能监控

文件存储 NAS 已云监控无缝集成。通过性能监控功能,您可以实时查看文件系统的IOPS、吞吐、延迟等性能概况。本文介绍如何查看 NAS 文件系统的性能监控数据。前提条件 已创建 NAS 文件系统。具体操作,请参见 创建文件系统。已开通云监控...

文件格式转换方法和注意事项

转换方法 在DLA中创建两张表,然后通过 INSERT INTO target_table SELECT FROM source_table 以指定的格式将数据写入OSS中。...OSS目标目录下生成的文件个数是不固定的, INSERT.SELECT 执行的集群环境有关。示例 ORC Parquet

基本概念

本文介绍了 文件存储 HDFS 版 使用的一些基本概念。术语 描述 文件系统实例 一个拥有全局命名空间,可用来存储数据的文件系统。您可以通过挂载点访问文件系统实例中的数据。挂载点 挂载点是文件系统实例在专有网络或经典网络内的一个访问...

使用限制

IOPS min{1800+50*容量,1000000} min{1800+50*容量,8000000} 吞吐 min{100+0.5*容量,4000}MBps min{100+0.5*容量,32000}MBps 快照 限制项 限制 限制说明 每个文件系统可以保留的快照总数(包括手动快照自动快照)256 1,当数据库文件系统...

什么是文件存储NAS

它提供了简单的可扩展文件存储以供ECS配合使用,多个ECS实例可以同时访问NAS文件系统,并且存储容量会随着您添加和删除文件而自动弹性增长和收缩,为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。NAS提供了通用型和...

按量付费

本章节介绍阿里云文档智能(Document Mind)按量付费模式产品价格。按量付费计费方式 付费指引 开通文档智能对应的商品服务后,调用量的扣费顺序为:免费额度->资源包->按量付费(后付费),产品免费额度和资源包用完以后,为不影响您的...

文件存储CPFS监控概述

通过查看文件存储CPFS文件系统的容量监控和性能信息,您可以了解文件系统的存储容量使用情况和读写吞吐、读写IOPS等情况。通过为文件系统的重要监控指标设置报警规则,您可以及时获知指标异常并快速处理异常。本文介绍文件存储CPFS支持的...

管理Notebook

本文介绍如何创建、打开、删除和导入Note等操作,帮助您管理Notebook。前提条件 已创建集群,详情请参见 创建集群。创建Note 使用阿里云账号登录 Databricks数据洞察控制台。在Databricks数据洞察控制台页面,选择所在的地域(Region)。...

操作步骤

步骤三:读取日志文件数据 表创建成功后,您可以在DLA中通过SELECT查询并分析OSS日志文件数据,帮助定位故障原因。log4j_sample.log SELECT*FROM oss_log_schema.log4j_log ngnix_log SELECT*FROM oss_log_schema.ngnix_log webserver_log ...

文件存储NAS SMB ACL概述

您可以将自建的AD服务NAS SMB卷连通,通过AD域身份或者Everyone的方式挂载NAS SMB卷,从而对文件文件夹设置ACL权限。NAS SMB ACL卷根目录默认值 文件存储NAS SMB ACL的卷根目录权限默认值如图所示:默认值设计的原因 SYSTEM和...

资源包

购买成功后,您可在 文档智能 控制台-服务管理开通 查看已购商品,根据您调用情况进行抵扣付费。OCR文档自学习资源包暂时仅支持相关链接购买,已购资源包可通过用户中心-资源实例管理 查看。计费案例 资源包 示例1 用户购买了PDF转Word的...

计费概述

文件存储NAS 文件备份费用 文件存储NAS支持云备份(Cloud Backup)服务无缝集成。您可以在NAS控制台定期备份NAS文件,并在数据丢失或受损时及时恢复文件。首次使用NAS文件系统的文件备份功能时,您可以免费试用30天,试用期结束后,您...

NAS存储卷概述

它提供了简单的可扩展文件存储以供ECS配合使用,多个ECS实例可以同时访问NAS文件系统,并且存储容量会随着您添加和删除文件而自动弹性增长和收缩,为在多个实例或服务器上运行产生的工作负载和应用程序提供通用数据源。存储规格 NAS提供...

2021年

2021-04-15 空间分析 2021年3月 引擎 功能名称 功能描述 发布时间 相关文档 Redis 自动扩容 帮助您快速弹性适配业务高峰,避免内存溢出的风险,有效保障线上业务稳定性。2021-03-18 开启自动扩容 2021年2月 引擎 功能名称 功能描述 发布...

挂载文件存储 HDFS 版文件系统

挂载说明 如果挂载点网络类型是专有网络,则只支持挂载点同一VPC网络的ECS实例挂载文件系统,且挂载点所绑定的权限组中授权地址必须包含ECS实例的VPC IP地址。挂载文件系统 连接ECS实例。连接方式,请参见 连接ECS实例。配置core-site....

API概览

AddTagsBatch 批量设置标签 调用AddTagsBatch为多个数据库文件系统实例批量添加标签,可能存在新增标签替换标签。ListTagKeys 查询标签键 调用ListTagKeys查询用户创建的所有标签键。ListTagValues 查询标签值 调用ListTagValues查询标签...

性能优化最佳实践

您可以通过调整core-site.xml配置、TestDFSIO配置或避免使用小文件来优化集群性能。调整core-site.xml配置 在测试集群吞吐性能之前建议在core-site.xml文件...将存储在 文件存储HDFS版 上的小文件聚合成大文件会对整体的分析性能有较大帮助

数据安全

数据恢复 文件存储NAS支持通过云备份服务进行备份恢复。数据备份可用于容灾备份、误删或恶意篡改恢复、数据版本控制、法律合规要求、数据迁移等场景。更多信息,请参见 备份和恢复文件。说明 云备份(Cloud Backup)作为阿里云统一灾备...

读写访问文件类问题

当您访问文件系统中的文件时,文件系统中的文件会受到某些限制影响,导致文件操作错误、挂载点无响应或访问无响应等。您可以在本文中查找一些常见文件操作错误、文件属主、数据不同步或访问无响应的解决方案。交叉挂载兼容性问题 Linux挂载...

迁移指南

说明 详情可参考Databricks官网文章:迁移指南 将工作负载迁移到Delta Lake 当您将工作负载迁移到Delta-Lake时,您应该注意到以下简化和apachespark和apachehive提供的数据源相比的区别。Delta Lake自动处理以下操作,您永远不要手动执行...

NFS文件系统传输加密

工作原理 NAS客户端工具定义了一个网络文件系统类型alinas,标准 mount 命令兼容。在ECS实例挂载alinas类型文件系统时,如果指定 tls 参数,NAS客户端工具会启动一个Stunnel监听进程,该进程转发并加密ECS实例对NAS服务器的访问,同时会...

查看CPFS容量监控

文件数:包括最大文件数、已分配文件数、已使用文件数、Fileset已分配文件数、Fileset已使用文件数、root Fileset已分配文件数、root Fileset已使用文件数。说明 root Fileset是文件系统的根Fileset,文件系统中独立创建的Fileset以外的...

快速入门(Linux)

本文介绍如何在NAS控制台创建通用型NAS NFS文件系统,并使用控制台一键挂载功能将NFS文件系统挂载至ECS实例(CentOS 7.9)上,从而实现数据上传下载。前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时,按照页面引导...

应用场景

文件存储 HDFS 版 适用于对吞吐要求较高的大数据分析机器学习的业务需求场景。大数据分析机器学习 在大数据分析机器学习场景中,应用对数据访问的吞吐性能和延迟有较高要求。而 文件存储 HDFS 版 能够提供高吞吐量和低延迟的访问能力...

产品优势

其他PCDN服务商相比,阿里云PCDN的主要优势包括价格低、质量好、成熟稳定。价格低:通过P2P技术可为客户提供更低成本的内容分发服务,(以峰值带宽计价)为云CDN价格的1/2,为传统CDN价格的1/4,可显著降低客户的分发成本。质量好:通过...

使用限制

产品规格 限制项 说明 每个账号在单个地域内可创建的文件系统数量 通用型NAS:20个 极速型NAS:200个 单个文件系统可创建挂载点的数量 通用型NAS:2个 极速型NAS:1个 单个文件系统最大文件数 通用型NAS:10亿 极速型NAS:5亿 单个文件系统...

管理挂载点

挂载点是NAS文件系统在网络环境中的连接点,以域名形式出现。创建文件系统后,您需要为文件系统添加挂载点,然后通过挂载点方式挂载访问NAS文件系统。本文介绍如何在NAS控制台上管理挂载点,包括添加挂载点、查看挂载点地址、移除挂载点、...

工具箱

工具箱是OCR文档自学习所提供的用于模型、模板路由分类及提升识别准确率的小工具集合,当前主要提供了分类器字段类型两大类工具。分类器管理 分类器:是一个支持多模板、多模型分类路由的工具。用户通过设定分类器中的关键词或训练样本...

资源包抵扣规则

本文介绍文件存储NAS资源包的抵扣规则和抵扣顺序。生效和抵扣时间 资源包购买后立即生效,将在购买时间段的按量付费账单中体现抵扣效果。假如您在2021年08月12日10:30:30购买了有效期为1个月的1 TiB极速型NAS资源包,则实际抵扣时间需要...

快速入门(Windows)

本文介绍如何在NAS控制台创建SMB文件系统,并在专有网络下通过ECS实例(Windows Server 2019)挂载SMB文件系统实现数据的上传下载。前提条件 已开通文件存储NAS服务。首次登录 文件存储NAS产品详情页 时,按照页面引导开通服务。已购买...

SMB文件系统传输加密

SMB文件系统传输加密采用认证加密算法(Authenticated Encryption),保证您的ECS实例NAS服务之间网络传输链路上的数据安全,确保您的数据在传输过程中不被窃取或纂改。使用说明 客户端操作系统 需使用支持SMB 3.0及以上版本文件协议的...

推荐的挂载方式

容器网络文件系统CNFS则是阿里云容器服务利用CSI插件抽象出的新的容器存储管理方式,传统CSI使用模式保持兼容。我们推荐您在使用阿里云容器服务时使用CNFS来管理和访问NAS存储卷,从而获得明显的性能提升和强大的管理能力和I/O可观测性。...

典型场景

构建数据湖 实时数据湖:支持DB的CDC消息数据(如Kafka)入湖,构建大规模的可以增删改查的数据集,延迟为T+10分钟。一键建仓:支持数据库一键入湖,T+1天。文件上传:数据上传后,DLA元数据发现功能可自动发现并构建好元数据体系。数据...

文件存储 HDFS 版上使用TensorFlow

本文介绍如何在 文件存储 HDFS 版 上使用TensorFlow。前提条件 已开通 文件存储 HDFS 版 服务并。具体操作,请参见 开通文件存储HDFS版服务。已完成创建文件系统、添加挂载点和挂载文件系统。具体操作,请参见 快速入门。已为Hadoop集群...

NAS监控概述

通过查看NAS文件系统的监控信息,您可以了解文件系统的使用情况。通过对文件系统的重要监控指标设置报警规则,您可以及时获知指标异常并快速处理异常。本文介绍NAS支持的监控项以及其报警规则说明。背景信息 云监控(CloudMonitor)是一项...

其他最佳实践

本文罗列了 ACM 的其他最佳实践文档。说明 ACM进入下线状态,所有配置管理相关的需求由MSE中的Nacos承接(ACM独享版,更好的安全和稳定性)。您需要在ACM控制台导出配置,然后在MSE控制台导入之前导出的配置即可完成迁移。具体操作,请参见...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
阿里邮箱 商标服务 文件存储NAS 云存储网关 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用