管理文件访问权限
oss2.OBJECT_ACL_DEFAULT 私有 文件的拥有者和授权用户有该文件的读写权限，其他用户没有权限操作该文件。oss2.OBJECT_ACL_PRIVATE 公共读 文件的拥有者和授权用户有该文件的读写权限，其他用户只有文件的读权限。请谨慎使用该权限。oss2....
管理存储空间读写权限
设置存储空间读写权限 存储空间的读写权限（ACL）有以下三类：读写权限 描述 方法 私有 存储空间的拥有者和授权用户有该存储空间内的文件的读写权限，其他用户没有权限操作该存储空间内的文件。oss2.BUCKET_ACL_PRIVATE 公共读 存储空间的...
HDFS配额（Quotas）介绍
如果额度不允许写入一个完整的块，则块分配会失败。一个块的所有副本都会计入额度中。例如，一个文件大小为N，有三个副本，则占用的额度为3N。配额是一个目录的属性，不仅在创建时会检查配额，在重命名时也会检查配额。对于重命名的目录，...
功能概览
阿里云 云备份 提供非结构化文件系统类数据同步功能，可以将源端数据源（包括NAS、HDFS、S3兼容存储、对象存储OSS、CPFS、OSS协议兼容存储等）同步至目的端数据源（包括阿里云上）。本文介绍 云备份 的数据同步功能概览，包括数据同步的...
追加上传
当文件已存在时，调用 AppendObject 接口会出现以下几种情况：如果文件为追加类型文件，且设置的追加位置和文件当前长度相等，则直接在该文件末尾追加内容。如果文件为追加类型文件，但是设置的追加位置和文件当前长度不相等，则抛出 ...
追加上传
当文件已存在时：如果文件为追加类型文件，且设置的追加位置和文件当前长度相等，则直接在该文件末尾追加内容。如果文件为追加类型文件，但是设置的追加位置和文件当前长度不相等，则抛出 PositionNotEqualToLength 异常。如果文件为非追加...
SQL使用限制
限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 表名、列名中不能有特殊字符，以字母开头，且只能用英文小写字母（a-z）、英文大写字母（A-Z）、数字和下划线（_）。注释长度 1024字节 长度限制 长度不超过1024字节的有效...
LLM-N-Gram重复比率过滤（MaxCompute）
LLM-N-Gram重复比率过滤组件主要用于大语言模型（LLM）的文本数据预处理工作，保留字符级或者词语级N-Gram重复比率在指定范围内的样本。使用限制 仅支持MaxCompute计算引擎。算法简介 将文本中的内容按照字符或词语进行大小为N的滑动窗口...
SQL使用限制
限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 表名、列名中不能有特殊字符，必须以字母开头，且只能使用英文小写字母（a-z）、英文大写字母（A-Z）、数字和下划线（_）。注释长度 1024字节 长度限制 长度不超过1024字节的...
SQL使用限制项
MaxCompute SQL是专门为大规模数据集设计的SQL语言，在服务大规模数据场景的同时，也需要遵循一定的限制来确保系统的稳定性和运行效率，本文为您介绍MaxCompute SQL的限制项。限制项 最大值/限制条件 分类 说明 表名长度 128字节 长度限制 ...
追加上传
当文件已存在时：如果文件为追加类型文件，且设置的追加位置和文件当前长度相等，则直接在该文件末尾追加内容。如果文件为追加类型文件，但是设置的追加位置和文件当前长度不相等，则抛出 PositionNotEqualToLength 异常。如果文件为非追加...
基础管理FAQ
本文介绍创建或删除NAS文件系统、添加或删除挂载点等的常见问题。每个账号可以创建多少个文件系统、文件系统有什么限制？每个账号在单个地域内最多支持创建20个通用型NAS文件系统和200个极速型NAS文件系统。单个文件系统容量上限：通用容量...
合并小文件
分布式文件系统按块（Block）存放数据，文件大小比块大小（64MB）小的文件称为小文件。分布式系统不可避免会产生小文件，比如SQL或其他分布式引擎的计算结果、Tunnel数据采集。合并小文件可以达到优化系统性能的目的。本文为您介绍如何在...
管理文件元数据
对象存储OSS存储的文件（Object）信息包含Key、Data和Object Meta。Object Meta是对文件的属性描述，包括HTTP标准属性（HTTP Header）和用户自定义元数据（User Meta）两种。您可以通过设置HTTP标准属性来自定义HTTP请求的策略，例如文件...
NFS文件系统传输加密
使用说明 重要 开启传输加密功能时，如果您的目标ECS实例上对应目录（例如/mnt）已挂载NFS文件系统，请先卸载NFS文件系统，再根据本文重新挂载NFS文件系统。关于如何卸载NFS文件系统的操作，请参见 通过NAS控制台卸载挂载目录。仅支持通用...
错误码
E25 大页长度错误 Enclave CLI在初始化Enclave内存时指定了无效的大页长度，请确保Enclave CLI代码未被修改导致使用无效的大页长度。E26 Enclave镜像所需内存不足 在运行 run-enclave 子命令时参数指定的内存小于Enclave镜像运行所需的最小...
自定义密码策略
说明 由于当前暂不支持指定字典文件。因此 1 和 2 的强度相等。默认值：1。loose_validate_password_length 密码长度。取值：0~256。默认值：8。说明 修改该参数无法突破控制台中最少8个字符的限制，您即使将该参数的值调整为5，在控制台中...
使用限制
其他限制 协议服务为多客户端提供了统一名字空间的文件共享读写能力，但在多进程或多客户端并发写同一个文件的场景中（例如，并发写同一个日志文件），各进程分别维护了独立的文件描述符及写入位置等上下文信息，而NFSv3协议本身并没有提供...
数据流动概述
CPFS智算版文件系统与对象存储OSS之间已实现数据流动。您可以通过创建数据流动任务实现不同源端的数据同步。背景信息 当CPFS智算版文件系统中的目录与OSS Bucket创建数据流动后，通过创建数据流动任务，可以完成数据的高速传输。传输完成后...
CreateChangeSet-创建更改集
访问级别：是指每个操作的访问级别，取值为写入（Write）、读取（Read）或列出（List）。资源类型：是指操作中支持授权的资源类型。具体说明如下：对于必选的资源类型，用背景高亮的方式表示。对于不支持资源级授权的操作，用 全部资源 ...
Alibaba Cloud Linux 3系统的NFS文件系统读取文件性能...
问题描述 问题表现 在Alibaba Cloud Linux 3系统的NFS文件系统中读取文件时性能不符合预期，典型表现如下：使用read、copy_file_range等系统调用从NFS文件系统中读取大文件时，耗时较久。使用 dd 命令从NFS挂载点的文件中读取数据时，...
数据类型
bytea 无 1 byte+binary string 1或4字节外加真正的二进制串 可变长度二进制串 character[(n)]char[(n)]1 byte+n n长度字符串 定长的空白填充。character varying[(n)]varchar[(n)]1 byte+string size n长度字符串 受限的可变长度。cidr 无...
ORC文件
ORC是为Hadoop作业而设计的自描述，类型感知的列存储文件格式。它针对大型流式数据读取进行了优化，但集成了对快速查询所需要行的相关支持。ORC和Parquet文件格式的区别：本质上Parquet针对Spark进行了优化，而ORC针对Hive进行的优化。前提...
是否支持使用固定的地址访问已上传的文件？
公共读以及公共读写权限的文件 支持 使用固定的地址访问已上传的文件，私有权限的文件 不支持 使用固定的地址访问已上传的文件。文件读写权限为公共读或者公共读写 在存储路径未修改的情况下，公共读或者公共读写的文件的访问地址不变。即...
生命周期管理概述
当您需要频繁访问低频存储或归档存储中的文件时，文件存储NAS支持文件或目录取回操作，避免频繁读写文件产生过多的读写费用。价格低廉，享受高品质无忧存储服务 例如，通用性能型NAS文件系统在开启低频存储后，相对于原通用性能型NAS文件...
配置CDH6使用文件存储 HDFS 版
数据迁移完成后，您还需要配置CDH上的HDFS服务、YARN服务、Hive服务、Spark服务、HBase服务，才能使用 文件存储 HDFS 版。配置Cloudera Management服务 执行以下命令，将最新的 文件存储 HDFS 版 Java SDK复制到Cloudera Management服务的...
存储空间占用情况
OSS-HDFS文件数据块block OSS-HDFS文件的所有数据块block均占用OSS Bucket的存储空间。OSS-HDFS文件数据块block占用是OSS空间主要占用部分，您可以通过hdfs du命令查看数据块block的空间占用情况。OSS-HDFS 文件checksum数据 OSS-HDFS支持...
一般性问题
数据库文件存储DBFS是面向数据库场景优化的POSIX兼容的共享读写的文件存储系统。主要适用于：OLTP及OLAP数据库场景：例如，MySQL、PostgreSQL等。NoSQL数据库场景：例如，MongoDB、RocksDB等。2.挂载点是什么概念、有什么作用？挂载点是...
通用型NAS
本文列举了容量型、高级型和性能型的性能指标、支持的文件协议类型、适用的高级功能及适用场景等，您可以根据业务需求选择合适的 NAS 类型。对于延迟敏感型应用，建议使用极速型 NAS。性能指标 项目 容量型 高级型 性能型 吞吐（峰值）初始...
使用前必读
文件上传 通过阿里云DCDN产品向源站上传文件，上传文件的大小限制为单个文件最大不超过300 MB。URL长度限制、HTTP请求头长度限制、URL＋所有HTTP请求头的总长度限制 HTTP2.0场景下：默认Nginx参数http2_max_field_size=32 KB，即单个HTTP...
使用Fluid加速Lindorm S3协议兼容的数据访问
这种大幅度的加速效果是因为Fluid具有强大的缓存能力，只要您访问一次某个远程文件，该文件就会被缓存在Fluid中，您之后的访问都不需要读取远程文件，而是直接从Fluid中读取数据。可选：当您不再使用该数据加速功能时，请执行以下命令清理...
数据类型汇总
无 VARBIT(n)Hologres 0.9版本 可变长，长度不超过n个bit的二进制串 有限bit长度的二进制串 存储字节不超过1 GB。无 INTERVAL Hologres 所有版本 16字节 无-178000000 years~178000000 years interval '1 year' TIMETZ Hologres 0.9版本...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
配置FTP输入组件
FTP输入组件适用于从FTP中将数据读取至大数据平台对接的存储系统内，进行数据整合和再加工。本文为您介绍如何配置FTP输入组件。前提条件 已创建FTP数据源，详情请参见 创建FTP数据源。进行FTP输入组件属性配置的账号，需具备该数据源的同步...
使用Python读文件
已准备Python支持读取的文件，例如TXT、CSV、XLS、XLSX或PDF等格式文件。步骤一：上传文件 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域后，单击 进入Dataphin>>。进入 资源管理 页面。在Dataphin首页，单击 研发。在数据 ...
Hive数据源
您可以基于HDFS文件和Hive JDBC两种方式读取数据：基于HDFS文件读取数据 Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。...
使用Python读文件
已准备Python支持读取的文件，例如TXT、CSV、XLS、XLSX或PDF等格式文件。步骤一：上传文件 登录 Dataphin控制台。在Dataphin控制台页面，选择工作区地域后，单击 进入Dataphin>>。进入 资源管理 页面。在Dataphin首页，单击 研发。在数据 ...
字符类型
NVARCHAR(n)可变长度的字符串，长度有限制。NVARCHAR2(n)可变长度的字符串，长度有限制。STRING VARCHAR2的别名。VARCHAR2(n)可变长度字符串，长度有限制。SQL 定义了两种基本的字符类型：character varying(``n``)和 character(``n``)，...
查询和分析
返回结果 每次查询时，每页最多显示100条查询结果，您可翻页读取完整的查询结果。无 单条日志内容显示 由于网页浏览器性能原因，对于超过10,000个字符的日志，日志服务只会对前10,000个字符进行DOM切词处理。如果超出10,000个字符，控制台...
FUSE使用说明
读写文件 列出/mnt/jfs/下的所有目录。ls/mnt/jfs/返回用户在服务端配置的所有命名空间列表。test testcache 列出命名空间test下面的文件列表。ls/mnt/jfs/test/创建目录。mkdir/mnt/jfs/test/dir1 ls/mnt/jfs/test/写入文件。echo"hello ...
- 产品推荐
- 这些文档可能帮助您